全球首个3D版AI合成主播、5G全息采访技术、智能眼镜......两会硬核黑科技盘点!
3D版AI合成主播、
5G全息访谈、大数据等等,
这次全国两会又“出圈”啦!
从参政议政圈,
延伸到科技展览圈。
你发现了吗?
两会报道场景本身
就是一个与时俱进的科技展览!
不信?咱们复盘一遍。
全球首个3D版AI合成主播
今年,人工智能驱动的3D版AI合成主播 - “新小微”,“走”进了观众的视线。是的,请注意这个“走”字!
“新小微”走进虚拟演播室
有人会问,之前就出现过AI主播,这次有何不同?
新主播“进化”程度更高。相比于之前坐着或站着面对镜头播报的AI主播,今年这位人工智能驱动的3D版AI主播不仅能走动起来,甚至连头发丝和毛孔都能经受镜头的考验,更接近于大家对于一个“大活人”的想象。
她不仅能实现一秒换装,360度无死角播报,还可以站起身在虚拟演播中穿梭,肢体语言也较为丰富。
“新小微”采用超写实3D数字人建模、多模态识别及生成等技术,不仅更真实立体,其播报口型、肌肤毛孔、发丝等细节都清晰可见,就连表情、发型、服饰均能根据不同新闻和场景变换。
可以看到,在超近镜头下,新小微的发丝、睫毛,甚至是毛孔都是清晰可见。
如此“高清”效果,又是如何打造的呢?
首先,是基于真人原型采集海量数据。新小微的真人原型,是新华社记者赵琬微。赵琬微戴着数据采集头盔,几百个摄像头对其身体各个部位,360度全方位“打点”扫描。
这样做的目的,是采集每一处细节信息,并对其多种形态的表情和动作,进行细致入微地捕捉记录。
采集完数据过后,便是生成高逼真度的3D数字人模型。
最后,通过搜狗分身的端到端多模态生成算法,对3D数字人模型进行实时文本驱动,也就是说,只要给到一个文本,就能输出一个视频或者视频流。
在讲话过程中,3D AI合成主播的头动、肩膀、眼神、眨眼等等都非常自然。
真人?AI?傻傻分不清。
“新小微”的播报形态可通过不同角度全方位呈现
5G + 应用
当5G“照进”现实,千兆级超高带宽和毫秒级的低延时为快速传播超高清、VR等信号提供了强大支持。
两会期间,人民日报等媒体推出了一款特殊的5G+AR采访眼镜,看似平平却“能量巨大”。
与手机设备连接后,5G+AR采访眼镜即可帮助媒体记者快速“识别抓取”新闻人物,并将系统内提前录入的人物姓名、职务等信息实时映射在眼镜右上角的微型屏幕中,仿佛动作大片中特工的秘密武器。
前方记者与后方共享素材后,等待短短几分钟,新上岗的“智能剪辑师”就能根据需要迅速剪辑视频,自动匹配字幕。
此外,画面人物的动态追踪、去除视频的拍摄抖动、多方位修复视频画质等更为复杂的后期操作都不在话下,如果视频内容较长,“智能剪辑师”还能自动搜索人物,定位关键信息时间,剪辑效率飞速提升。
除了采访眼镜外,中央广播电视总台记者使用的一款5G+8K的背包也堪称“直播神器”。
记者采访时,背包内的设备实时传输8K信号,后台技术人员通过收录的8K信号快速编辑。
实时收录的多路信号可通过人工智能计算,进行人脸检测、动作检测、镜头质量评测、穿帮镜头检测等,生成AI剪辑成片。
在“AI云剪辑”展示区,技术人员展示了AI云剪辑技术应用。实时收录的多路信号通过人工智能计算,进行人脸检测、动作检测、镜头质量评测、穿帮镜头检测等主要算法逻辑展示,并现场生成了AI剪辑成片。
此次,总台利用5G网络开展直播连线,全方位多角度报道两会新闻,总台摄制的8K实时视频也同步在新媒体平台和全国各大城市的40多万个超清大屏展示。
在5月25日进行的十三届全国人大三次会议第二场“部长通道”采访活动中,工业和信息化部部长苗圩提到了5G全息异地同屏系列访谈,“虽然记者跟代表相隔大概1000公里,但好像是在面对面交流。”
5月18日,新华社首次推出了5G全息异地同屏系列访谈,邀请来自基层和抗疫一线的全国人大代表程桔、罗阿英、蔡卫平讲述履职的故事,利用5G和全息成像技术打造全新访谈栏目,引发业界内外强烈反响。当真人等比例大小的“代表”被实时投放至异地演播间,虚拟与现实融为一体。记者与采访对象不仅可以“面对面”交流,还可以“云端”握手。
主持人和全国人大代表蔡卫平一起“云拍照”,
为战“疫”加油
“5G为人工智能、虚拟现实等新媒体技术的进一步发展及应用带来了全新的生命力。随着人工智能、虚拟现实、大数据、云计算、区块链等技术的发展和普及,这些新媒体应用对于网络基础设施提出的要求越来越高,而5G的应用则会使这些需求迎刃而解。”中国科学技术大学科技传播与科技政策系副教授张燕翔表示,“疫情期间,网络对人们生活的影响更深入,从全国范围大规模的直播课堂,到两会中这些新媒体技术的深入应用,5G与人工智能、虚拟现实等新媒体技术一起构造起来的支撑技术,为人们的生活、工作创造出越来越多全新的可能性,技术创新与应用发展将会形成良性互动。”
这真的是个秀技术、
开脑洞的新“舞台”有没有?!
从智能眼镜、全景相机到VR、AR、AI、5G
港真,两会的技术“带货”能力
真不是说说而已~
END
(文章内容综合自:澎湃新闻、智东西、交汇点新闻、中国青年报、全国能源信息平台、飞象网等)
往期推荐