解密黑科技：证券业首位AI主播在广发证券 “上岗”

天天财经独家，速关注

12月14日，证券业首个AI主播“小田”正式在广发证券上岗。而她的第一个工作任务，便是参与到广发证券易淘金APP上播报每日的早盘视点、盘中热点和收盘点评等实时资讯。这也是整个证券行业首位以真人员工形象为原型合成的虚拟主播。

这位高度类似真人的AI主播一经面世，就引发了业界的高度关注，更引发了人们对其背后人工智能技术的好奇：这个在镜头前播报实时资讯的“小田”，如何诞生以及它的未来又将有哪些应用价值是业界最为关心的话题。

广发证券AI主播“小田”正式上岗

证券业首位AI主播正式“上岗”

打开广发证券易淘金APP，用户看到的不再是简单的数字和固定的界面，而将与AI主播“小田”不期而遇。这样一位温暖又亲切的真人形象，远胜机器千篇一律的冰冷面孔。

所谓AI主播，顾名思义，指的是使用“自然交互+知识计算”等多模态虚拟人物生成技术，模拟出一个类似人类的虚拟主播，来完成任意文本内容的视频播报或交互。广发证券的“小田”，就是以广发证券员工为原型，结合录制该员工的多条音频和视频记录，经过长达2个月的细致模型训练融合后生产上线的。最终上线的AI 主播“小田”，外形与其人物原型高度相似，在声音、微表情方面也高度保真了原型特点。

据悉，AI主播上线，能极大提高视频生产效率。完成一场AI主播的“华丽上线”，只需要输入准备好的文字脚本，等待2-3分钟，即可生成一个精美的AI主播的视频资讯。

广发证券AI主播的上线，是2020年度易淘金App智能化和数字化三大升级中的首个升级，为投资者提供无微不“智”的陪伴和服务。广发证券也是整个证券行业内第一家推出AI主播/虚拟数字人的券商，成为了中国人工智能与证券业大胆融合并付诸规模化应用的典型案例，标志着广发证券在金融科技领域的行业领先优势。

AI主播“小田”为投资者作收盘点评

黑科技解密：图像+语音前沿技术加持

首个AI主播的背后，有哪些“黑科技”加持？

据介绍，AI主播基于图像、视频、音频等多模态虚拟人物生成技术，通过整合人脸关键点检测、人脸特征提取、人脸重构、唇语识别、情感迁移等多项前沿技术，结合语音、图像等多模态信息进行联合建模训练，生成与真人无异的AI主播虚拟模型，背后涉及图像、语音、自然语言处理等人工智能技术的高度融合。

首先是图像技术，主要涉及到三维重建技术、表情合成技术和唇语合成技术。三维重建技术利用数字扫描仪进行真人动作及音频等人体特征的采集，采用数字特征提取构建一个与真人一摸一样的AI虚拟人物形象，完成AI主播人脸、形体等主体的构建。表情合成技术建立在人脸重建的基础之上，通过调整各个表情基向量的系数，将各种不同的表情进行叠加，就得到了基本的表情。唇语合成是专门针对嘴唇，而且跟文本内容、语音、发音方式等都有关系，不是一个单一的输入，因此需要通过图像识别捕捉真人的嘴唇运动。

通过上述图像技术的综合运用，AI主播从形体到人脸、从动作到表情都能做到视觉上的栩栩如生。

AI主播技术

处理好了形象，还需配上人物声音。只有声画关系的同步协作，才能最终呈现有温度的真人形象。

其次涉及到的是语音合成技术。先要建立数据集，录制真人上千条的语音作为语音库，要有成对的词和语音，且要尽可能覆盖语言中的元音、辅音、不同的音调。然后是文本序列转换成音素序列，利用NLP技术对输入文本进行语言学分析，完成“分词”。其次，涉及到合成声音技术。从语音库中寻找与得到的音素一致的语音单元，将波形拼接起来变成波形序列，将音素实时转换成语音参数，在语音库中进行匹配，再与第一类方法一样拼接生成语音，通过端到端的方法，直接从输入的文本，输出最后的波形，所有的流程都交给模型。

AI主播技术

得益于以上“黑科技”的加持，广发证券的AI主播“小田”说话时的声音、嘴唇动作和表情方面，做到了与真人几乎一致的效果。

深耕人工智能 赋能更多应用场景 

AI主播是广发证券将多模态虚拟人物生成技术应用于证券行业的创新性尝试，AI主播应用在广发证券易淘金APP用于播报每日早盘视点、盘中热点和收盘点评等实时资讯，仅仅只是一个开始。伴随着人工智能技术的不断升级，AI主播在证券业的应用范围将更为广泛。未来，AI主播可能以培训老师、客服助手、讲解员等各式角色出现，深度应用到线上课程、培训路演、产品双录、开户审核等多个应用场景，为人工智能与证券业融合提供最佳实践。

广发证券首席信息官、首席风险官辛治运表示，随着数字化转型的推进，依靠人工智能等信息技术重塑业务模式，已经成为行业共识。经过几年的持续投入和实践，广发证券在人工智能方面已经取得了初步的效果。

“广发证券已经建立了一个‘能听、会说、会想’的AI智能大脑，集成了包含智能语音、智能语义、智能应答、机器学习、知识图谱等8大智能能力，构建了开放、易用的智能化业务引擎。目前智能化能力已经输出到15个业务部门，支撑超过50个智能化应用场景。” 辛治运介绍。

例如，基于智能语音、语义分析、OCR识别等基础能力，构建综合智能质检引擎，已广泛应用于网上自助开户、身份证自助更新、创业板首签、业务权限开通审核等多个证券业务智能质检审核场景，实现对客户上传材料的7*24小时100%覆盖实时检测；基于财务及非财务等多维数据，探索使用机器学习算法识别企业财务异常、财务舞弊等，充分利用人工智能技术赋能业务创新及风险防范。

除此之外，广发证券还在不断地探索人工智能技术应用在投资研究业务，拟将自然语言处理、深度学习用于标的因子库、模型库构建，标的结构化信息全景构建，辅助投研决策，持续打造体现专业能力的差异化竞争优势。

事实上，广发证券的人工智能技术成果与应用实践，早已引起了行业内的关注。过去几年，信息技术部的人工智能团队就多次受国际行业会议邀请，分享和交流广发证券在人工智能领域的经验和成果，受邀参加国际数字化数据处理会议（International Conference on Digital Data Processing 2019）作主题报告《Financial Application: Predicting the Wealth Management Products Buying Behaviour of Listed Companies》并刊发论文；受邀在中国计算机学会推荐的国际人工智能学术会议（International Conference on Knowledge Science, Engineering and Management 2017）做主题报告《Collaborative Filtering Based on Pairwise User-Item Blocking Structure(PBCF): A General Framework and Its Implementation》并刊发论文。

广发证券已有多篇关于人工智能的论文发表在国内期刊；2020年，人工智能团队在金融科技学术期刊《金融科技时代》刊发《深度学习在证券开户身份证质检中的研究和应用》论文；2019年，在由中国人民银行的主管的国家级科技期刊《金融电子化》刊发《基于知识图谱的资讯预警应用》论文。此外，公司已申请国家知识产权专利局关于证券资讯查重算法、客户持仓预警、资讯事件图谱化和财务异常检测等人工智能领域的7项专利，在行业内具备一定影响力。

CIS

推荐阅读

戳！