凌云时刻
写在前面:本文作者周辉山,阿里云智能计算平台事业部高级解决方案架构师,一直是“大数据”的挚友,具备10+年大数据解决方案和数据建仓经验,持续致力于运营商、大安全、政务等行业数据价值化智能应用。本文根据周辉山在“2021中国互联网大会数据安全论坛”上的分享整理而成。
大家好,我今天主要分享的是:在数据安全做好的前提下,大数据和AI怎样支撑我们的政府数字化转型。数字化转型里面会经历两个阶段:
一是业务数字化,即从物理世界到信息世界的过程。
二是数字业务化,简单来说就是把数据信息转化、存下来后,怎样利用这些海量数据进行支撑决策和分析,这个过程会依赖云计算、大数据、AI等技术。
数字业务化阶段需要依赖大数据技术驱动业务创新,比如金融领域基于大数据可以把原来交易数据的清算从8小时缩短到1.5小时;在线教育某公司通过大数据和AI实现自动化处理60%问题,减少40%监课人员,投诉率降低66%。
2020年双十一,当天阿里巴巴大数据平台MaxCompute处理的数据达到1700PB,每秒处理的数据量达到40亿,1700PB相当于全球70多亿人口每个人存230多张高清照片的数据量,是基于强大的大数据体系保证了双11交易正常,提升了商业效率。
大数据已逐渐全领域覆盖,包括政府互联网、能源制造、传媒、金融、零售等行业,所谓“无行业不大数据”。
数字化转型发展会面临较多的技术挑战,可总结为“存不下、算不动、运维难、架构乱、智能无、治理慢”。大数据技术发展至今20年的时间,就是在不断的真正或尝试解决上述问题。大数据从探索期到发展期,当前已进入到普惠期。
2009年,也就是在大数据的探索期,阿里巴巴其实已经启动大数据技术自研工作。
进入到普惠期后,整个大数据技术平台逐步趋于成熟。所以现阶段真正的需求是基于数智融合的一体化大数据平台,要求BI+AI一体化,“数据为体、智能为用”是平台建设的原则。一体化具备三个特征:
第一是企业级平台,大数据需要融合多模态计算,并且实时化、智能化和服务化;
第二是湖仓一体能力,数据湖有它的灵活性,数据仓库有它的成长性,怎样把这两个特点融合在一起也是一个难题,所以需要融合。
第三是综合数据治理,包含数据安全治理,需要更自动化和智能化。
政企领域AI还处在发展阶段,需要重视五个重点要素:
第二需要可用和丰富的算法,比如神经网络、深度学习等算法; 第三需要大数据平台的算力,机器学习应该和大数据平台“长”在一起,就近原则; 第四贴近业务的场景,也是AI应用的核心,将AI落地到具体的场景,才能实现实在的价值; 最后一个要素是人机回环,核心是指人与机器通过交互形成“数据→模型→场景→新的数据→强化模型→新的场景”的闭环和迭代,通过人与机器的相互反馈进行持续创新。
政企领域AI的主要技术方向,常见的有语音识别、文字识别、图像分析、深度学习、机器学习、自然语言等。现阶段真正需要更多突破的方向主要在深度学习和自然语言,比如知识图谱其实是人机对答、智能编稿等最常见的场景,而知识图谱的落地很大程度依赖于自然语言识别技术的深度。AI技术已在各行业不断的尝试和发展,相信再过五到十年,必然是“无行业不AI”。针对AI的技术应用趋势,最近有一个词比较活,即“联邦学习”,其实也是保障数据安全前提下延伸的技术需求,所以现时代的一体化大数据平台需要增强版的数据安全体系: 一是原地计算场景,需要支持数据分类、合规授权、敏感数据发现和处理、风险行为审计等; 二是控制权不丢失的数据加密传输,即基于区块链技术实现数据共享但控制权不转移; 三是多方计算,多个数据持有方基于可信环境的计算,各取所需,数据可用不可见。
政府大数据应用城市大脑是非常典型的案例,成效也非常明显,包括: 一件事联办,通过数据互通、大数据等实现最多跑一次,如房产证办理等; 一网通办某场景中通过实人认证、自动填单、材料自动检验、申请人信用审核等完备预审环节,实现无人干预的受、审、批全流程智能化; 企业精准服务,智能匹配,主动触达:即通过个性化问答,为不同类型、不同需求的企业、人才通过个性化问答,为不同类型、不同需求的企业、人才精准匹配适用政策,让企业落地、人才安居、投资引荐等更加便捷高效。城市大脑的建设目的一是惠民生,二是城市精细化管理,比如包括车辆占道、流动商贩管理、渣土车管理、消防通道阻塞等城市安全和隐患等行为的识别、发现和治理等都在不断发展和突破中。
现阶段讲大数据和AI,不再只是简单理解成技术或平台,而是需要定义成场景驱动的数据中台,让所有的业务都在上面,形成“无业务不中台”局势,并已逐步在数字政府各细分行业形成全领域覆盖之格局,“数据成为第五大生产要素”也具备了必然性。基于云计算、大数据、人工智能等核心技术,让政府海量数据能更好的汇聚和更实时的融合,实现数据标准化、数据资产化、数据价值化和业务智能化,能够真正基于数字决策提升城市运行效率和公共服务水平,推动城市发展转型升级,真正回报社会和普惠民生。(完)