查看原文
其他

赋能中欧财富用数据驱动运营,镜舟科技入选“2023爱分析·数据库最佳实践案例”

镜舟科技 镜舟科技
2024-12-05

近日,由爱分析主办的第五届数据智能高峰论坛在北京成功举行,镜舟科技受邀出席。
在论坛上,爱分析揭晓了数据库最佳实践案例评选结果。经过多轮角逐,镜舟科技凭借在金融领域的优秀实践——中欧财富基于StarRocks打造数据平台,成功入选“2023爱分析·数据库最佳实践案例”。

01

中欧财富最佳实践:利用镜舟数据库优化分析性能,极大提升数据资产价值

中欧财富是中欧基金旗下控股子公司之一,致力于打造开放型理财精品店,努力为客户提供专属的理财解决方案,是历史业绩最佳和实践经验最长的投顾机构之一,并打造了集精品基金、养老账户、投顾服务、场景定制产品于一体的综合理财平台。

数据资产是金融公司最重要的资产之一。如何高效利用数据资产实现业务价值的增长,是每个金融企业都要面对的难题。当前,数据资产规模的快速增长和实时数据分析的高需求,给中欧财富现有数据系统带来了极大挑战。

中欧财富数据平台分析效率与性能不足,双重挑战待解决

1.高效、实时业务决策需求挑战

在业务决策环节,管理人员需要从企业信息系统中获取当下和过往数据来辅助评估业务情况,有效的、一致的支持信息能够帮助管理人员准确地把握市场变化的脉搏,做出高效业务决断。

中欧财富原有数据平台基于 Hadoop 搭建,除了架构庞杂之外,也无法满足实时查询需求。

2.精准用户服务需求挑战

同样的,在用户服务环节,理财师需要看到更集中、更详细的用户数据,并根据用户资产状态数据做出最精准的服务决策,为用户提供快速、有价值的服务。

中欧财富的原有系统是多数据源烟囱式发展,导致理财师在数据的综合利用上有一定难度,无法及时获取更有价值的用户信息。

基于StarRocks打造实时、统一数据平台,助力中欧财富数智化决策业务

镜舟科技基于 StarRocks 帮助中欧财富搭建数据平台,针对实际的业务数据问题针对性提出优化方案,解决中欧财富固定报表和CRM这两大业务场景中的三个数据平台的问题,分别是自营平台、恒生平台以及CRM平台,最终实现极速、精准的数据指导。

中欧财富数据平台采用多层建设,分别是基础数据层、计算层、数据流层、数据仓库、数据管理、数据应用等6层组成。
数据应用层:
中欧财富的业务场景为固定报表和即席查询,理财师通过报表形式,按照基金产品维度或客户维度查看买入买出交易情况,以及当前客户信息、持仓信息等关键数据。
数据管理层:
包括元数据管理和指标管理,指标管理涉及业务域的管理划分以及对应的指标库的构建。
数据仓库层:作为实时数仓,提供实时分析服务。

OLAP 查询引擎由某国外老牌数据替换为 StarRocks ,提升了大数据量下的查询性能。可依据不同业务、不同场景构建 ODS、DWD、DWS、ADS、DIM 等数据分层,服务上层组件。

此外,在基金客户关系管理的业务方面,替换系统自带的ES,中欧财富自行打通产品对接 StarRocks 迭代为实时分析的 CRM 系统。
数据流层:
增加一层数据缓存,形成数据缓冲,同时具有数据再利用、数据反哺的作用。
计算层:
拥有数据挖掘、数据清洗、数据拆分与组合、规则校验、数据转换、任务调度、指标计算等功能。
基础数据源:
由企业内部各种类型的数据源组成,包括MongoDB、MySQL、TiDB及某国外老牌数据。
中欧财富的技术架构围绕 StarRocks 在多层实现应用。
上游有 TP 库有 MySQL、TiDB等数据库,以及流处理工具 Kafka,ETL 过程利用 Flink 实时导入 StarRocks 。在 OLAP 分析层使用 StarRocks,部分日志分析用 ES  解决。
在下游应用端,查询特点偏向于点查、Join 以及 Ad-hoc 查询,性能要求并发100且时间相对固定,每天查询结果约10万量级。进一步聚焦,中欧财富的数据流向大致可分为三条:



  • 原有数据库 -> log miner -> Flink CDC-> StarRocks

  • 原有数据库 -> log miner -> Flink CDC-> Kafka -> Stream Load-> StarRocks

  • 其他某些 APP 数据,进入到 Kafka,30s 攒批消费一次




化后的中欧财富数据平台在用户服务、业务决策、应用运行等方面有显著提升。

更好的用户服务:平台提供各类业务指标和数据检索、分析能力,理财师能够实时查看客户状态、交易状况、资产情况,为用户提供高效的服务。

更精准的业务决策:平台给数据分析人员提供聚合数据、统一服务、关联查询能力,提供更优的数据分析支持。

更稳定的业务运行:平台提供有效的数据查询,帮助技术人员监控业务状态,快速发现数据问题。

02

深度行业理解能力和专业服务能力,镜舟科技为数据资产平台提供可靠经验
基于过往服务的 30+头部金融客户,镜舟科技对金融行业沉淀了丰富的行业经验和深刻的业务理解。通过此次合作,镜舟科技为有数据资产管理需求的金融企业梳理了数据平台搭建和升级的4大要点。

第一,建设统一的数据仓库,实现统一和高效的数据管理,也是整个平台优化中最关键的一步。

第二,兼容不同的数据源(解决不同接入方式、数据类型、时区、性能等问题),灵活搭配构建数据流,解决分散、异构数据问题。

第三,将数据落入统一的数据仓库,把控数据质量、制定统一规则,做到在业务流程中筛选数据和转换数据。

第四,提高数据的挖掘计算能力和实时大批量迁移数据的能力。

03

结语
此次入选,是业界对镜舟科技在金融领域沉淀行业技术能力和高效、稳定数据服务成果的重要认可。未来,镜舟科技会持续深入核心领域的业务场景,帮助企业利用把握业务价值、激活数据资产,向数字化转型更快迈进。

中欧财富

中欧财富是中欧基金旗下子公司上海中欧财富基金销售有限公司的投资理财APP,提供基金、投顾组合等多种产品及基金定投等投资理财服务,聚焦互联网财富管理,致力于以金融科技服务大众,提升个人客户购买基金的盈利体验。中欧财富为个人客户及合作机构,提供公募基金等产品销售服务及基金投资顾问服务。中欧基金是中欧财富的股东,中欧财富与股东之间实行业务隔离。中欧财富本着勤勉尽责、诚实守信的原则开展基金投顾业务,但并不保证各投顾组合一定盈利及最低收益。投顾组合与单只基金产品的风险特征存在差异。基金投资顾问业务尚处于试点阶段,存在因试点资格被取消不能继续提供服务的风险。

“2023爱分析 · 数据库最佳实践案例”

权威咨询机构爱分析组织的年度数据库案例评选活动,面向落地数据库的各行业企业和数据库厂商,围绕实践领先性、案例创新性、应用成熟度、价值创造四个维度对候选实践案例进行评选,遴选业界数据智能实践中的最佳案例,树立引领未来数据智能发展的标杆,推动中国企业数字化进程。

继续滑动看下一个
镜舟科技
向上滑动看下一个

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存