Ziva Dynamics：基于动态解剖模拟，低成本创造虚拟人和虚拟生物

继收购Weta Digital之后，Unity日前宣布收购Ziva Dynamics以普及实时角色创建。后者由前 Weta Digital 数字角色总监James Jacobs创立。

Ziva是一家专注于复杂解剖模拟、角色创建和实时艺术工具方面的软件公司。Ziva Dynamics的技术被认为改变了角色创建的过程，目前已被用于电影、电视、游戏、零售和互动环境等的多个领域，不少艺术家、全球品牌和工作室和都在利用 Ziva 的技术制作世界级角色。

就在去年11月，Unity宣布收购《指环王》《阿凡达》视效团队Weta Digital。

交易完成后，Unity 表示 Ziva 将借助机器学习的力量，通过云促进将 Weta Digital 的工具带入实时 3D 的过程。Unity 还打算使用 Ziva 的技术创建轻易可得的可信数字角色，并声称该公司的机器学习技术将支持基于云的创建，最终将简化生产并降低成本。

前维塔数字角色总监

创立的Ziva Dynamics公司

Ziva Dynamics 是一家专注于角色创建和人体模拟的软件公司，于2015 年由奥斯卡奖得主 James Jacobs（首席执行官）、南加州大学维特比工程学院教授和麻省理工学院 TR35 获得者Jernej Barbic（首席技术官）和加拿大商人 Chris Godsall 共同创立。

此前Ziva Dynamics总共经历4 轮融资，共筹集了 1040 万美元的资金。其中Toyota Ventures 和 Millennium Technology Value Partners 是最近的投资者。

Ziva 的团队还包括 Creative 副总裁 Simon Clutterbuck，他曾是 Weta 生物部门的负责人，另外还有行业专家Crawford Doran、Essex Edwards、Ravi Agrawal 等。

去年11月Ziva Dynamics 推出封闭测试版 ZRT Face Trainer，是基于云的机器学习训练的服务，用于游戏和实时工作，Ziva Dynamics 尚未公布定价或公开发布日期。

ZRT Face Trainer的第一个应用示例使用了Unreal 5 虚幻引擎，该技术演示可以实时捕捉分辨率为 4K的面部动画，帧数稳定到 60 帧。这些面部动画并不仅限于Unreal 5 虚幻引擎，可以应用到其他的引擎中，这次合作Ziva仅是用Epic 的引擎来展示实时面部动画的捕捉效果。

在该测试版中，ZRT Face Trainer系统可供选定的用户进行免费测试，一小时内可以将任何面部网格转换为高性能实时木偶人脸，在一小时内表现超过 72,000 个面部形状。

该软件允许游戏开发人员和动画师插入他们自己的面部网格并将转化的实时木偶化为动态表情。经过训练，开发人员可以使用 15TB 的 4D 扫描数据库来模仿人类演员的表情范围。

据产品网站介绍，面部木偶适用于游戏和实时应用程序，运行时仅有30MB，在单 CPU 线程上以 3ms/帧的速度运行。

Ziva VFX是Ziva Dynamics的角色模拟软件，通过将复杂的过程提炼成艺术家可以使用的工具，通过完全动态的解剖模拟，让虚拟人和动物可以像在现实生活中一样移动、伸展和弯曲，并且以数字方式复制和耦合软组织（如肌肉、脂肪和皮肤）的物理性和物质性，创建逼真的 CGI 角色。角色包括虚拟人角色，还有跨物种的虚拟生物，但大多数都是真实比例的人头。

Ziva VFX工具赋予3D 角色更多应用在电影、游戏和互动体验的方式。Ziva的技术已经用于电影、电视、零售体验和互动环境的角色制作，例如电影《权力的游戏》以及《哥斯拉大战金刚》，也被用在游戏中，例如 Ninja Theory 的 Senua's Saga: Hellblade II和漫威蜘蛛侠：迈尔斯·莫拉莱斯（Marvel's Spider-Man: Miles Morales）等。

在与Ninja Theory的合作中，Ziva在 Senua 的 Saga Hellblade II 游戏展示中创造了 40 英尺的巨魔形象。在后者PlayStation 5 版本中，该游戏使用 Ziva Dynamics 的工具来描绘漫威英雄特技期间肌肉的变形。

而漫威蜘蛛侠：迈尔斯·莫拉莱斯的制作方Insomniac Games 的首席角色技术总监 Josh DiCarlo解释道：“你在服装表面看到的每一个变形都是肌肉和布料模拟的结果。我们使用了以往只用在电影的技术，从内到外完全模拟了整个角色。”

Ziva 的技术从根本上改变了角色创建过程，同时提供了更好的控制、速度和能力。这是利用机器学习、深度学习和生物力学的领先实践的尖端技术的结果。它从根本上改变了人们制作角色的方式。

两大游戏引擎

持续加码数字人技术

正如Emma在视频中所说：“Unity 和 Ziva 有着共同的愿景，即让所有艺术家，无论技术水平如何，都有机会接触并规模化制作逼真的角色。这些角色不仅限于像我这样的虚拟人，还适用于任何种类的生物、怪物或者是难以想象的、逼真的或风格化的动物。”

两者将发挥各自的优势，Zeva在角色模拟和机器学习方面占据领先地位,而Unity对实时技术有深入了解，两者将缔造轻松而强大的合作伙伴关系。

随着全球市场对元宇宙的关注度提升，实时3D内容制作的需求增长。因提供低门槛、易上手的跨平台开发引擎而闻名的Unity，也正将技术和工具向游戏以外的领域渗透。

当前阶段，数字人作为元宇宙产品化体现，正在逐步走向大众视野。拥有实时3D内容制作能力的Unity与数字人技术要点相契合，可以天然的参与到数字人领域。

2020年，Unity已通过《异教徒》短片首次对外公开展示其实时数字人技术。在去年的Unity技术开放日上，Unity向开发者展示最新的数字人项目。

Unity数字人生产全量流程包括4D真人扫描、高精度面部建模、定义风格化模型、微表情处理、实时表情驱动等。并将持续迭代该流程，实现降低开发数字人的门槛，让更多开发者都能以较低成本参与其中的目的。

在提供数字人底层技术支持的基础上，Unity希望达到的效果。举例来说，是用户可以按照Unity提供的技术标准和生产流程后，就可以一步步搭建起一个数字人形象。

过去一年，Unity陆续收购了人工智能3D扫描公司RestAR、3D数据处理软件Pixyz、同步实时协作工具SyncSketch、植被建模和环境创作产品SpeedTree的开发商IDV，及《指环王》《阿凡达》视效团队Weta Digital。

通过这一系列收购，Unity的底层技术和工具产品得以提升。此次收购Ziva Dynamics，将进一步推动Unity工具在数字人类和生物领域的发展。

Unity表示，在收购Ziva后，Unity将开放并普及Ziva的工具，让任何水平的艺术家都能轻松、快速地创造出虚拟人物。

除了Unity，Epic也在将虚幻引擎技术应用于数字人领域。虚幻引擎在去年发布了次世代数字人类创作工具MetaHuman Creator，该工具能够在保证质量、保真度和逼真感的前提下，将以往需要数周乃至数月的实时数字人创作过程缩短至1小时以内。

在这些底层技术的推动下，数字人在未来有望应用于更多的场景。