2022 年“元宇宙”概念的兴起为游戏技术的变革提供了新的方向,也让互联网看到了新的发展趋势。作为元宇宙实现的基础,云游戏技术也成为了各行业关注的焦点,那么云游戏技术包含哪些重要部分?这些技术落地到元宇宙空间时,能够为虚拟世界带来怎样的新价值?云游戏与元宇宙的结合现如今发展到了那个阶段?未来的元宇宙将走向何方?
3 月 9 日下午 14 点,氪星直播间邀请到了阿里巴巴云游戏事业部(元境)总经理王矛 ,Unity 中国总裁兼首席执行官张俊波 和哈尔滨工业大学计算机学院教授、长江学者范晓鹏 ,共同聊聊:“ 云游戏技术与元宇宙的融合共生之路 ”,共同畅想元宇宙的未来之路。
Unity 是全球领先的实时 3D 内容创作及运营平台,被广泛应用在游戏开发中,全球排名前 1000 的移动游戏中,70% 以上基于 Unity 开发。 Unity 在全世界拥有非常广泛的用户基础,仅中国就有超 270 万开发者。 同时,全球平均每天有超过 1 万个基于 Unity 开发的新增应用,现在越来越多的元宇宙产品也基于 Unity 开发。
我们认为未来元宇宙需要大量算力,需要表达非常复杂的场景,如万人同屏,只能通过云来解决。Unity 作为应用非常广泛的工具,我们在积极地与元境等云游戏平台对接适配,从而让开发者能专注于体验本身的创新。
阿里巴巴云游戏事业部(元境)总经理 王矛
阿里元境是领先的面向云游戏和元宇宙时代的基础设施,我们的服务拥有工业级的运行品质,支持全终端全操作系统的运行,在全国有广泛的边缘节点覆盖。目前已经为国内百余家中大型游戏厂商提供了云游戏技术服务,在元境平台上的云游戏运行时长已达 2.5 亿小时以上,是已被市场验证和被广大玩家体验过的成熟服务。同时,元境已将多个云游戏核心技术沉淀为元宇宙的基础设施,目前有很多元宇宙的创新项目在使用元境的服务,比如西安博物院、宝马汽车、手机天猫的 3D 体验空间等等。
哈尔滨工业大学计算机学院教授、长江学者 范晓鹏
我所负责的智能接口与人机交互研究中心目前在元宇宙相关领域的研究内容主要包括虚拟原生、数字人、虚实结合和 VR 直播。 同时我也是计算机产业协会元宇宙专委会副会长,我们研究中心自九几年成立以来,承担了多项国家级的各种科研项目。 我也已经参与了大概 10 余项的国家级项目,其中很多都涉及元宇宙的部分。
#01
云游戏技术包含哪些重要部分;在落地应用的过程中,这些技术(或解决方案)解决了哪些问题?
王矛:
从技术角度,我们可以把元宇宙看作是一个特别大的容器,里面综合了非常多的技术。大家可能会首先想到串流技术,串流技术就是将计算放到云端以后,把渲染出的实时互动的、低延迟的、高清的渲染结果通过 streaming 的方式呈现到终端,构成用户互动的体验。串流只是元宇宙和云游戏的一部分,并不是全部,串流重新定义了计算的分布。从云游戏或者元宇宙基础设施的角度来看,可以发现消费者端的算力逐渐向云迁移,过去千千万万的用户自己来维持本地计算设备的可用性,放到云上就带来了很多新问题,这就需要大量的运维工作。对于元境来讲,我们为行业解决了运维的问题,提供了智能化运维的能力,大幅度降低运维成本,提升稳定性。除此之外,如何让云端的软硬件适应今天的计算要求,也是元境重点投入精力解决的环节。 范晓鹏:
在元宇宙和云游戏方面,我主要关注的是云渲染和分布式渲染的内容。在云渲染方面,我非常关注如何将渲染画面更好地更快地传送到用户终端,如何降低带宽、减少时延,尤其是如何能让一些低算力设备的用户能够实时观看到这些高清的甚至 8K 的画面。另外关于分布式渲染,如果将渲染工作分配给云端,那么云的压力很会大。如果可以做到分布式渲染,那么如何进行数据传输,如何融合渲染的结果,以及各个用户的数据安全问题,都是我在持续关注的内容。 张俊波:
以前我们做游戏,习惯于在一台机器里面,通过内存共用直接共享进程,这样做非常简单,但缺点也十分明显——没有办法向上扩容。随着游戏的发展,对于硬件的要求越来越高,无限制增加机器也不现实。 云游戏做为一个解放算力的途径,打破了机器的边界,给我们带来了无限的想象与可能,通过云我们可以合理地分配算力,可以并行计算,甚至是进行异构性计算,我们甚至不一定要买服务器,完全可以做自己的服务器,做自己的硬件架构来解决分布式渲染。 “星际广场” 使用分布式实时 渲染,实现了 万人同屏 +同步
王矛:
谈到高品质元宇宙,首先要谈用户体验。用户体验非常重要,因为它能让用户切身感受到,高品质元宇宙必然能给用户带来良好的观感和体验,比如更清晰的画面、更低的延迟等等。第二,是普及的、普惠的、普遍的计算能力,要达到弱终端依赖,甚至是去终端依赖。第三,是能给用户带来的新价值,比如说我可以打破“盒子”,给用户越级的体验,提供一些原来在手机上无法享受到的服务。此外还有客户价值、行业价值,我们是否能解决实际的工业、教育、文旅、营销等行业的问题,切实为客户带来商业价值。 范晓鹏:
首先第一层,我很认同王总讲的用户体验,要给用户呈现良好的视觉效果,除此之外,例如 VR 场景,戴上头盔之后不会引起人的生理不适,我觉得是高品质元宇宙最基本的要求。在此基础上,元宇宙应该对我们的真实世界有更高层次的仿真,更接近于真实的世界。比如物理仿真和化学仿真,目前计算化学技术的发展和云平台的强大算力都有助于我们实现这一理想目标。 张俊波:
范老师对于高层次仿真技术的见解令我深受启发,我认为这也将是必然的发展趋势之一。除了两位老师说的这些,我觉得还有两件比较重要的事情是:第一, 元宇宙应该有足够多足够好的内容生态吸引大家进入 ,可以满足每个人的不同口味。第二,就是 在元宇宙中需要一个规范的市场体系 ,人们进入元宇宙都是抱有一定的目的,目的会创造需求,之后才会有市场。在这个市场模式中,商家可以通过广告来营销,消费者也将获得更好的消费体验。
使用 Unity 引擎打造的巴黎圣母院 VR 体验 #03
请各位嘉宾举例聊聊身边的高品质元宇宙产品,以及实时云渲染在其中的技术应用。
王矛:
我们推出了一个高品质的文旅元宇宙产品“元境博域”,不需要下载,大家在浏览器里就可以访问这个 3D 空间。元境博域拥有较好的用户体验,能够做到在各个端上提供稳定的、一致的性能体验, 里面展出的文旅产品、数字文物等也能够与用户实时互动,给大家提供了一个交流的空间。 范晓鹏:
我现在接触的比较多的高品质的元宇宙产品有两个,一个是数字虚拟人,另一个是虚拟博物馆。就数字虚拟人来说,我们和合作伙伴合作,推出了数字的虚拟人。我们解决的主要问题是如何让虚拟人更加真实,并在此基础上提高精度,让虚拟人的表情变得更加自然。目前我们正在研究如何提升虚拟人的美观度,这需要通过程序算法来实现。另外一个产品是虚拟博物馆,虚拟博物馆让我们坐在家里就可以实现云参观。 我们也和数字博物馆开展了合作,云渲染可以解决数字博物馆中数字藏品的版权问题。如果我们把藏品数据都发送给用户,用户在本地渲染就可能把数据给截留,但是如果在云上实现渲染,就可以把渲染之后的画面传送给用户,从而避免这样的问题。如果我们的用户有不同的级别,那我们也可以渲染出不同精度的数字藏品的图像进行传送,这样方便实现版权控制,此外,可以在传送给用户的画面里嵌入水印,如果有流出也比较容易溯源。 张俊波:
我们公司有一个类元宇宙的 Demo 《Enemies》 ,未来,我们希望把它做成可交互的虚拟空间,或将其中的内容放在不同的开放场景中让大家体验。 在内容上, 云渲染技术可以让内容生成更高效,使画面更清晰 ,通过扫描和建模技术快速生产素材、降低使用门槛。在技术上, 云渲染技术可以极大降低渲染成本和内容生产成本 。未来,我们希望打造一个数字资产平台,使素材标准化,并实现内容的共通共享,让更多的创作者能够以合规的方式进行二次开发,避免重复造轮子。 #04
在这些技术落地到元宇宙空间时,能够为虚拟世界带来怎样的新价值?以及能够给用户带来哪些新的吸引力?
王矛:
在用户体验方面,这些技术能够让用户在比较低端的设备上体验到高品质的数字内容,把特效拉满,实现跨级体验。同时,续航能力显著提高。用户过去在端上计算的时候可能可以玩 1 小时,用云游戏就可以玩几个小时。此外,对游戏的制作方或者游戏的发行方来说,降低了用户试玩的成本,提高了下载转化效率。 范晓鹏 :
对于用户来说,多人的互动是一个比较有吸引力的点。多人互动不仅是在游戏内部本身,还可以在设计好的固定情节当中,实现用户之间的碰撞。然后,元宇宙也能够为用户提供长期的体验。在元宇宙中,用户可以形成一些固定角色,相当于有一个社会属性。 张俊波:
最近,我们和一些合作伙伴做的渲染方案,不论是何种应用,都首先考虑用云渲染。此外,我们还需要考虑如何提供质量更好的服务,比如,当一个场景需要几亿个面时,我们该如何解决?因此,我们推出了 云渲染 技术,把渲染搬到云端,以提升效率。当然,我们还需要解决延迟等问题,尤其是当大量人员同时使用时,办公室带宽将不可避免地出现问题。
#05
元宇宙除了需要技术搭建以外,还需要丰富的内容生态,这方面产业链中如何实现合作共赢?
第一 ,与技术生态类似,我们应当用一个更开放、更产业链的思路建设内容生态。 第二,推进企业间与行业范围内的标准化工作。 第三,发挥在知识产权方面的天然优势。 第四,大力开展运营工作,做好推广,形成团队合作。 范晓鹏:
在生态合作共赢方面,我特别赞同王总刚才所说的标准制定部分。现在国内大大小小厂商都在做元宇宙,如果元宇宙无法形成标准,那最后可能导致大家各自为战,无法形成合力。标准规范对最终技术落地与企业生态都是一个很关键的因素。然后,在标准的基础上,我认为开源的社区也是很重要的。开源社区可以提供一个论坛,大家在论坛上去寻求帮助,互相解答问题,开展比赛,从而推动技术的发展。 除了 标准化与开源社区 外,我认为还需要 探索一个开放检索的形式 。在这个形式中,大家可以订立开放式的协议,规定素材的使用与如何分利,从而让创作者受益,同时实现素材的高效利用。 #06
国内云游戏和元宇宙有哪些发展趋势,然后以及未来可能会有哪些落地的场景?
概 括 下来有两个趋势,我也想提醒国内的这个领域创新创业的团队,要重视和注意这两个趋势,一个是数字经济和实体经济的融合趋势,也就是“数实融合”;另一个是在产品体验或者在技术上的“虚实互促成长”,或者说“虚实相生”。实际上元宇宙现在已经成为下一波数字经济的主要发展路径,我们会更重视元宇宙与实体经济的融合,对其他各行各业的赋能和效率的提升。 关于落地场景,我认为国内云游戏和元宇宙的落地场景非常广泛,这一点和海外不太一样。过去几年国内在数字化促进产业经济发展方面做得很好,大家都认可这个价值,所以我们在本就成熟的电商领域,以及范老师提到的文旅领域,都有落地元宇宙项目。教育科普、分子计算、化学计算的线上化,也是科研元宇宙落地的重要方向。此外,元宇宙在商业营销领域也有非常多的落地场景,元境有幸加入到了商务广告协会牵头成立的元宇宙营销应用研究院,成为了主要发起单位。 范晓鹏:
场景方面刚才我也介绍过了,一个是数字虚拟人,另一个就是线上虚拟博物馆,除了这两个之外,我们实际上还落地了河南电视台的虚拟现实直播活动。从趋势来看,元宇宙以及它能够给大家提供的体验功能,可能只是开始,它未来可能会有更广阔的空间。另外,每个人在思考问题时,都是在脑海中进行仿真,并且元宇宙可能在发展到一定阶段后,能够促进人工智能的进步。也就是说,在解决人工智能问题时,可以在机器人中搭建一个小的元宇宙进行仿真,这也是我们实验室目前正在做的事情。 张俊波:
今年大家对于元宇宙更加理性了,而且随着 AIGC 的崛起,市场会通过多元因素对元宇宙的落地做出更符合实际的判断。我认为,电商、文旅、汽车这些行业,都将从元宇宙中受益。 在 电商 方面,虽然人们习惯于在淘宝、京东等店铺上购物,但元宇宙数字营销有可能创造出一些新奇的营销方式,能够做到交互体验、沉浸式体验的零售商户将会有更高的获客能力; 文旅元宇宙 则可以让人们可以在家里就可以获得沉浸式的逛展体验; 汽车智能座舱 的发展也可以为汽车行业带来革新性的变化,让汽车真正成为用户日常生活中的第三空间,也有望成为最佳的元宇宙入口。 当然,这需要大家齐头并进、携手共创,才能促进各行各业走向数字化、智能化。
#07
在各位嘉宾心中,未来的元宇宙应该长什么样子的?产业中各方还需要在哪些方面进行探索?
王矛:
相比于目前各个独立的元宇宙空间,我认为未来的元宇宙应该是一个互联互通的元宇宙。从目前产业发展来看,预计未来一年至少有几十个甚至上百个元宇宙,如果这些元宇宙彼此割裂,会对其价值大打折扣,也不利于国内元宇宙的产业发展。所以我希望未来元宇宙是彼此互通的,空间与空间互通、线上与线下互通。我们也在推进这一天的到来,用实时云渲染的能力来支撑元宇宙产业,深度与各个应用场景耦合产生更大价值。 范晓鹏:
随着科技的发展,未来的元宇宙产业中,首先需要关注的便是数字人,除了外观,更重要的是它的思想和灵魂,而这需要人工智能技术的加持。未来,如果这些问题都已经解决,数字人仍然面临着一个虚实结合的问题,即虚拟人需要成为化身机器人,以实现其在真实世界做不到的事情。这也是企业和创业者们非常期待的未来发展。因此,整个元宇宙产业应当与生态环境对接,达成共生关系。 张俊波:
未来应该有大量的内容来自于用户,每个人都将参与内容创作,而不仅仅是内容消费。同时,这些内容可以在任意元宇宙平台中流通。 为实现这一点,更重要的是 实现互联互通 ,以吸引更多的创作者,将创作的资产剥离出来,让它可以跨越各个元宇宙平台。这对创作者来说将更有利,也可以鼓励更多的创作者愿意去创造自己的作品。
长按关注
第一时间了解Unity引擎动向,学习最新开发技巧