查看原文
其他

她?很“灵”!变身“挑战杯·元宇宙”第一位女主持人!

创新创业的 北京理工大学 2023-08-28

800多根“骨骼”的协同配合

才能让“Ta”对你招手

82个材质参数的动态调整

才能让“Ta”对你微笑

“Ta”与你素未谋面

却可以和你在虚拟世界

成为亲密伙伴

“Ta”就是第十三届“挑战杯”

中国大学生创业计划竞赛

“001号数字参赛者”

“灵”

9月30日19:00

“灵”将担任全国决赛

项目路演答辩直播主持人

向观众们介绍赛事安排及大赛特色

对入围全国决赛的34个创业项目

进行参赛引导

“灵”如此智能、灵动

这背后又有哪些北理工智慧呢?

1.让微笑更甜美

建立虚拟数字人面部模型

为了让“灵”的表情更灵动,微笑更甜美自然,团队使用基于分片面部基模型的重投射误差优化算法,优化捕捉人脸的三维空间点坐标,并使用Blendshape+骨骼的驱动形式,有效提高了“灵”面部模型数据的精度。


2. 让主持更专业

真人演绎播报动作

为了让“灵”拥有和专业主持人一样的手势动作,团队聘请了主持人在动作捕捉室中穿戴动捕设备进行播报动作的真人演绎,并通过光学标记点反射得到相应骨架的位移,使用OptiTrack动作捕捉系统采集专业主持人的动作,搭建主持动作库,最大限度的还原专业主持人的播报动作。


3. 让说话更自然

为了让“灵”的语音与表情同步,具备普通人说话的流畅程度,团队使用了AUDIO2FACE服务,保证了在音频源输入后,能生成不同的面部动画和对话口型。同时,团队不断调整优化“灵”面部肌肉的灵活程度、总体情感等,再结合Text to Speech技术,自由调节语速及语调并生成不同风格的语音,让“灵”可以胜任更多的应用场景。


4. 成功“出炉”

为了让“灵”成功成为全国决赛项目路演答辩直播的主持人,团队使用了虚幻引擎,将预制好的主持播报身体动作库、生成的面部动作库以及语音库结合,最终合成了挑战杯虚拟播报视频。

太棒啦!看完介绍我已经迫不及待地要进入“挑战杯”云端会场看“神仙打架”啦!

快来快来!扫描下面图片中的二维码就可以直接进入哦!



“灵”作为语义、语音、视觉

三大AI技术融合的结晶

代表着未来人机交互的新范式

也是未来元宇宙世界

沟通真实与虚拟的关键

从数字参赛者

到元宇宙世界

北理工在办赛过程中

惊喜不断

多“元宇宙”,“出圈”传播

近日

#北理工开发首个挑战杯元宇宙# 话题

冲上热搜

喜提北京同城热搜榜单榜首

相关话题总阅读量达1250w+

9月15日

北京理工大学研发的

“挑战杯·元宇宙”数字交互空间

正式开放测试

实现了四个全国“第一次”

北理工力量再次

刷爆朋友圈

来自全国高校的

参赛师生和社会观众

纷纷进入元宇宙世界

体验虚拟世界的乐趣

登录人次已突破10万

“挑战杯·元宇宙”后台登录数据

新华社、光明日报

中国教育报、中国青年报

北京日报等多家主流媒体

也纷纷关注

聚焦报道

“破屏”融合传播

“挑战杯·元宇宙”


内容“破屏”,获得广泛认可

交流“破壁”,赢得大众点赞

传播“破圈”,取得良好效果



从数字人的制作

到元宇宙的打造

一项项亮眼成果的背后

是北京理工大学

突出的创新创业能力

和浓郁的创新创业氛围

北理工师生发挥技术优势

积极运用先进数字化技术

彰显数字化办赛创新化办赛特色


线上办赛精彩不断

期待线下相聚在北理工校园

共襄一场“精彩、务实、永不落幕”

的创新创业盛会!


官微推荐







立德树人、以教为上,北理工教师再获奖!

出品:党委宣传部

素材:校团委、光电学院、往期推送、各媒体

编辑:崔雨涵、史桠彬、陈俊雅

审核:蔺伟、刘晓俏

点分享

点赞

点亮

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存