【金猿产品展】镜舟数据库——新一代极速全场景MPP数据库,解决企业数字化转型最后一公里难题
镜舟科技产品
本产品由镜舟科技投递并参与“数据猿年度金猿策划活动——2022大数据产业创新服务产品榜单及奖项”评选。数据智能产业创新服务媒体
——聚焦数智 · 改变商业
镜舟数据库是基于 StarRocks 发展起来的企业级商用数据库,致力于解决企业数字化转型最后一公里难题,帮助企业建立“极速统一”的数据分析新范式,满足金融政企客户对技术支持、解决方案、生态建设、售后保障等方面的极致要求。
镜舟数据库既支持从各类实时和离线的数据源高效导入数据,也支持直接分析数据湖上各种格式的数据。镜舟数据库兼容 MySQL 协议,可使用 MySQL 客户端并适配各类主流 BI 工具。同时镜舟数据库具备水平扩展、高可用、高可靠、易运维等特性。
当前,镜舟数据库已广泛应用于金融、零售、物流、制造、电商、游戏、其他互联网场景等的行业头部客户,覆盖了实时数仓、OLAP 报表、数据湖分析等场景,助力企业实现多维复杂、实时、高并发的数据分析。
2022年重大更新升级极速分析体验,统一数据驱动
1、极速分析查询:在MPP 执行框架、全面向量化执行引擎、基于代价的优化器(CBO)的基础上,开发了全新的Pipeline引擎,可以更好的进行计算调度,优化复杂查询的性能。提供了细粒度的多版本数据缓存,可以缓存并复用中间计算结果,大幅提升并发查询的性能。通过UDF和Lambda函数可以让用户灵活的进行功能扩展。
2、极速数据更新:进一步完善数据更新能力,通过索引落盘可以降低更新时内存消耗,支持部分列更新可以方便的对大宽表进行高效更新,并且大幅提升了Primary key的稳定性和Flink生态兼容性。
3、统一数据模型:卓越的单表和多表查询性能,在大宽表、星型模型、雪花模型,预聚合模型中均可实现极速分析。尤其是通过多表物化视图可以连接多种模型的构建,针对不同的业务选择不同的模型。
4、统一分析场景:深耕场景优化,在实时、离线、高并发、Ad-Hoc 等多种分析场景下均能提供卓越性能。
5、统一湖仓:对接多种数据生态,不仅可以联邦查询,还可作为数据湖引擎的加速器,提供统一查询服务。在2022年,重构了Connector框架,来降低各种数据源的对接成本,逐步完善了包括Hive/ Iceberg /Hudi /Delta lake等各种数据湖的直连分析性能,支持了Multi-catalog,并可以兼容各种云上的三方Catalog服务。
6、统一管理:通过资源组机制实现细粒度的资源隔离,保证不同类型的负载可以在一个集群中并行工作。
用数据分析新范式打开企业数字化转型新局面
1、在服务各行业客户的过程中,镜舟数据库提出了“以数据为中心来驱动业务发展的场景覆盖能力”的方法论,即“业务感知”、“策略制定”、“精准行动”、“反馈迭代”,以此提升分析效率、实现数据价值的最大化。
2、在提升行业客户覆盖度上,镜舟数据库依靠技术生态的战略布局,构建深度的行业服务能力,包括开源社区生态、云厂商生态、数仓上下游的产业生态以及解决方案合作伙伴生态。这使得镜舟数据库能够覆盖从项目的前期咨询到最后项目成功上线的全过程。
3、在实现“让客户更好地基于镜舟数据库的技术和产品持续创造业务价值,成就客户,实现共赢”的过程中,镜舟数据库打造了四位一体的客户成功体系。从前期咨询、 POC 测试、交付准备、上线实施、持续经营,镜舟数据库成熟的客户成功体系可以覆盖客户的全生命周期,通过标准化的人员能力和标准化的服务体系,与产研体系形成产品能力闭环,推动业务飞轮快速旋转。
应用场景/人群借助专业团队与客户的深耕实践,镜舟主要洞察了金融、零售、制造、物流、电商、游戏、汽车出行、泛互联网等八大行业。
金融:数据是金融行业的重要性资产,而数据仓库是金融行业的重要基础设施,在数字化转型过程中发挥着至关重要的作用。作为新一代实时数仓领域的领先者, 镜舟数据库将持续助力银行、基金、证券、保险等领域的产业数字化,充分发挥出数据的价值。
(镜舟金融行业解决方案架构)
制造:随着数字化进程推进和产业的不断升级,将数据作为一种战略资产建设数据管理体系,通过大数据赋能业务数字化、精细化、智能化管理已成为制造业必经之路。镜舟数据库立足于自助BI分析平台、质量实时追溯场景,持续助力制造业构建“产、检、供、销”的端到端全数字化运营体系。
(镜舟制造行业解决方案架构)
游戏:游戏行业市场竞争日趋激烈,面向游戏整个生命周期的精细化运营势在必行,作为新一代实时数仓领域的领先者, 镜舟数据库通过数据来驱动精品化研运落地,提升游戏运营自助BI业务、用户画像、游戏行业风控等场景的数据分析能力,帮助广大企业抢滩游戏精品化时代。
(镜舟游戏行业解决方案架构)
极速全场景分析引擎,实时查询返回
流批一体,实时数据更新
丰富的大数据生态,湖仓一体
架构简单,运维便捷
全新的业务洞察速度
极速的任意维度OLAP分析和AdHoc查询,全新的向量化执行引擎,亚秒级查询延时,单节点每秒可处理多达100亿行数据,综合查询速度比其他产品快10—100倍。
全新的业务洞察实时性
数据秒级实时更新可见,单节点支持100M/秒写入速度。
赋能更多人员进行业务洞察
支持数千用户同时分析,支持高并发,部分场景每秒可支持高达1万以上的QPS,TP99可控制在1秒以内。
构建灵活,快速响应业务变化
基于多种数据模型皆可实现极速分析,业务交付时间从周加快到小时甚至分钟级,提升数据工程师和分析师工作效率可达10倍以上。
服务客户/使用人数服务超过200家的10亿美金级以上大型企业。
市场价值有了镜舟数据库,客户有望随时随地、随心随欲地使用数据,不再担心数据源不统一、维度多了速度慢、一线分析师无法做复杂查询、相关产品之间不能兼容等问题,通过打通数据全链路,实现企业的降本增效。
在极速统一数据分析新范式赋能的百业中,金融、物流、汽车、制造等行业的市场价值最为突出,亦是镜舟数据库核心洞察的数据分析场景:
金融行业:助力某头部股份制银行加速自助风控指标平台,该指标平台致力于为业务方提供一站式数据服务,以指标治理为切入点,1分钟找到数据,3分钟创建看板,5分钟挖掘价值。
物流行业:作为大数据引擎支持助力某大型现代化综合速运企业构建实时运单系统,单笔运单计算时长从 90 秒缩短到 4 秒,单位时间内订单计算量提升了 400%,一年节省了百万级成本开销。
汽车行业:助力某头部智能汽车企业构建了一套湖仓一体的数据架构,实现低成本存储海量数据、高效实时的数据分析,从而灵活应对各种业务分析场景,极大地降低了学习、开发和运维成本。
制造行业:助力某世界五百强企业提升实时大屏、集团 HR 服务、邮件告警等场景的数据分析效能,实时大屏中实时数仓平均响应速度在 200-500 毫秒内,集团 HR 服务场景中多表关联自助分析查询性能提升了 3-5 倍,邮件告警场景中实现秒级预警功能、准确率达到 92.3%。
提示:直接点击文末左下角“阅读原文”链接可直达该产品官网页面。
产品所属企业·:镜舟科技
镜舟数据库是基于StarRocks发展起来的企业级商用数据库,帮助企业建立“极速统一”的数据分析新范式,满足金融政企客户对技术支持、解决方案、生态建设、售后保障等方面的极致要求。已广泛应用于金融、零售、制造、游戏等行业头部客户,满足客户实时数仓、OLAP 报表、数据湖分析等场景,实现多维复杂、实时、高并发的数据分析。在北京、上海、杭州、广州、西安、成都等多个城市设有分支机构。
《2022中国企业数智化转型升级服务全景图/产业图谱2.0版》
❷ 创新服务企业榜
❸ 创新服务产品榜
❸ 最具投资价值榜
❺ 创新技术突破榜
联系数据猿