精彩回顾 | 数据工程实践沙龙

2020年6月30日，作为2020大数据产业峰会的系列活动，由中国信息通信研究院、中国通信标准化协会大数据技术标准推进委员会（CCSA TC601）共同举办了“数据工程实践沙龙”，吸引了超过120名嘉宾参与。

沙龙由中国信通院云大所大数据与区块链部副主任姜春宇主持，中国信通院云大所大数据与区块链部工程师李雨霏对“大数据服务能力成熟度模型-数据工程”标准做了背景和内容介绍，星环科技行业咨询总监高海华、阿里云智能计算平台高级产品专家黄博远（班公）、东方国信数据总监张永丽，分享了银行、互联网、政务等行业的数据工程项目实践。

良好的大数据服务能力可以使大数据项目“事半功倍”，也逐渐成为大数据提供商的核心竞争力，以实现在不同业务场景下持续运营数据资产。信通院在前期与多家企业进行深入调研和交流后，于今年2月份启动“大数据服务能力成熟度模型”的标准编制工作，20余家企业参与到这项工作中来，包括金融、互联网、能源行业的需方企业，以及大数据产品提供商和第三方咨询机构。

李雨霏首先对信通院云大所开展“大数据服务能力成熟度模型”的初衷进行了介绍。当前，多数提供商的大数据服务能力处于初级阶段，业界缺乏标准和规范化的大数据服务评估体系，信通院将牵头构建大数据服务能力的评估标准，并通过开展评估工作明确大数据服务的基准和标杆。其次，解读了“大数据服务能力成熟度模型”标准内容和评估方法。大数据服务能力主要包括平台建设、数据工程和分析应用三大部分，其中数据工程起到了“承上启下”的关键作用，通过实施数据治理、开发、运维，满足需求方管理运营数据资产的要求，并基于流程、制度、人员、技术、工具和交付物等几个维度，从能力项到能力域、再到整体大数据服务能力进行五个能力等级的符合程度评定。

高海华聚焦于银行业的数据工程项目，具体包括数据模型、数据资产管理专项等方面。数据模型从“分析者”视角梳理不同源系统的数据集成至数仓，形成业务领域集市；数据资产管理专项包括数据标准、数据质量、元数据、数据安全和数据服务等核心活动。同时，他分享了数据工程项目工作流，以及支持项目实施的工具能力，认为数据工程的目标由保障数据质量向资产共享开放演进。

黄博远针对数字政府和互联网金融行业，认为数据工程项目应遵循“产品+交付=客户价值”的原则，再次强调了服务对于项目实施效果的重要性。在项目流程方面，归纳了售前支持、PMO评审、需求细化、方案设计、开发交付、项目收尾六大阶段；在项目组织方面，明确了顶层方案统筹负责人以及各个角色在项目各个环节的职责。他认为数字政府的数据工程项目侧重业务和数据架构设计、数据治理等，互联网金融侧重数据安全和风险管控。

张永丽结合多年来在政务数据领域的项目经验，认为政务数据工程项目包括数据共享开放、数据标准化、数据加工等活动。数据共享开放的交付物包括政务职能、权力清单、负面清单和责任清单等；数据标准化的交付物包括数据元标准清单、数据标准化流程、数据质量稽核规则等；数据加工的交付物包括在基础库和主题库场景下的数仓分层、指标体系、标签体系等。同时，认为政务数据工程项目应以数据治理体系建设为核心，面向业务应用。

在讨论环节，专家们就如何提升数据工程服务能力发表了看法。

（1）要理论和实践相结合，理论提供了较为全面的、基础性的框架，实践关注于具体的数据工程项目，两者相辅相成；

（2）要通过不断提炼和总结项目经验，多维度的提升数据工程服务能力，包括多部门的协调沟通能力、规范项目流程、明确不同场景下的交付物，实现“从1到N”的复制；

（3）要逐步探索轻量化数据工程实施思路，采用标准化、工具化、敏捷化的数据工程实施方法，提升数据工程项目对业务需求的响应速度，使数据工程及时有效的支撑上层数据应用。

中国信通院云大所一直以来致力于大数据技术、数据资产管理和数据流通等领域的研究、标准、评测和评估工作，开展了10批“大数据产品能力评测”，覆盖了数据管理集成、隐私计算、数据库等方面的300余款大数据产品，并已获准成为数据管理能力成熟度（DCMM）评估机构。下一步，我们将在8月份开展“大数据服务能力”预评估，优化评估标准和评估方法，并在9月份启动正式评估。未来，我们也将从持续评估、细分行业、沙龙分享、论文和案例征集等几个方面开展工作，欢迎更多的大数据提供商参与到我们的评估工作中！

推荐阅读关于我们

     中国通信标准化协会大数据技术标准推进委员会（CCSA TC601,简称：数标委/BDC），旨在凝聚产业链各个环节，识别和解决大数据发展面临的重大问题，开展大数据技术、数据资产管理、数据共享与流通、数据安全等共性基础标准研究，以标准推进工作为纽带，推动大数据与实体经济深度融合。欢迎加入我们的行列！

      入会咨询：张德民   15313961683

                        [e-mail]