NVIDIA Omniverse 与 GPU 赋能影眸科技优化数字人开发
人工智能(AI)等前沿科技的不断迭代发展,促进了数字人开发和应用落地,为多领域、多行业带来了全新的发展机遇。随着各行业商业模式逐步迈向多元化和数字化转型,数字人的开发和应用需求也与日俱增,促进了用于数字人制作和开发的软硬件系统和平台的不断进步。
影眸科技(上海)有限公司是一家致力于数字人底层技术研究的高科技企业,专注于数字人的制作、渲染、驱动和运营等方面的技术开发,助力各行业不断探索智能科技驱动下数字人应用的更多可能。
©2023 影眸科技
版权归影眸科技所有
本文所有图片和视频均由影眸科技制作,如果您有任何疑问或需要使用文中图片和视频,请联系影眸科技
NVIDIA Omniverse 是一个基于 USD(Universal Scene Description)、用于创建和运行元宇宙应用的平台。影眸科技基于 NVIDIA Omniverse 平台强大的协作和渲染功能,结合 NVIDIA GPU 出色的显存性能和存储带宽,来提升其用于数字人生成的 ChatAvatar 的性能,为数字人开发提供更优质高效的底层技术。
优化数字人开发:渲染和计算不可或缺
数字人底层技术的开发涉及到多领域技术的协同进步,旨在创建生动传神的数字人、实现“以假乱真”的互动效果。ChatAvatar 是由影眸科技开发的生成式 AI 算法框架,可用于生成/编辑影视级的数字人脸资产。上线一周,ChatAvatar 就已在海外平台获得了超过 50 万的关注度。随着测试范围的不断扩大,影眸科技发现在 ChatAvatar 开发过程中,底层相关技术亟待升级以创建更加生动的数字人:
优化 GPU 性能:ChatAvatar 在运行中需使用专业 GPU 进行数据处理、模型训练,来为用户提供生成式 AI 云服务。随着开发不断深入和应用落地所带来的对大量计算资源的需求,影眸科技不可避免地面临着相应的 GPU 显存和带宽压力;
提升渲染支持:渲染是数字人制作不可或缺的部分,包括毛发、皮肤等多方面内容。ChatAvatar 需要在具体的渲染平台进行使用,因此,为构建完整的数字人开发工作流,影眸科技需寻求优质渲染平台的支持;
此外,随着 ChatAvatar 应用拓宽和企业规模的不断扩大,对 GPU 计算资源需求的增加也对开发成本带来了一定压力。因此,影眸科技选用 NVIDIA GPU 与可加速 3D 工作流的 NVIDIA Omniverse 平台,以期提升数字人渲染制作水平、实现降本增效。
NVIDIA Omniverse + NVIDIA GPU
推动全流程降本增效
ChatAvatar 是影眸科技构建的、用于数字人开发的生成式 AI 算法框架,可将自然语言文本作为输入,来生成符合 CG 行业制作标准的 3D 人脸模型和 PBR 材质(如以下视频所示)。影眸科技将 ChatAvatar 搭配 NVIDIA Omniverse 平台使用,可支持用户开展从数字人模型创建到渲染的全流程协作。
NVIDIA 基于 Omniverse 的丰富生态,结合 NVIDIA GPU 强大的计算性能,可为影眸科技数字人开发提供有力支持:
Omniverse Audio2Face 生成式 AI,支持用户仅基于音频文件来创建逼真的面部动画。影眸科技可基于 Omniverse Audio2Face 的多语言处理能力,扩展 ChatAvatar 生成数字人的灵活性;
NVIDIA Omniverse 可连接 Maya、虚幻引擎和 Omniverse Create,赋能使用影眸科技的创作者在其他渲染工具中,通过 Omniverse 连接器,创建更加生动的数字人角色动画;
基于 NVIDIA Ampere 架构开发的 NVIDIA A40 GPU 及 NVIDIA RTX A6000 GPU,集优秀的专业图形性能与强大的计算和 AI 加速能力于一体。影眸科技采用 NVIDIA GPU,利用其强大的计算能力和数据处理能力,可提升数字人模型的构建、训练以及数据处理速度;
在 ChatAvatar 中通过自然语言文本输入生成符合 CG 行业制作标准的 3D 人脸模型
影眸科技还可基于 NVIDIA GPU 的支持,利用 Omniverse 平台来展开实时协作、完成高质量的光线追踪渲染、模拟、虚拟制作等工作,以提升数字人的创作效率和质量。此外, NVIDIA GPU 节能高效的优势还可帮助影眸科技应对因计算规模扩大带来的成本压力。
潜力无限:探索数字人未来应用的更多可能
NVIDIA Omniverse 与 NVIDIA GPU 赋能影眸科技提升生成式 AI 算法框架性能,推动了数字人开发流程加速与质量提升,助力各行业不断探索智能科技驱动下数字人应用的更多可能性,推动了数字人领域的开发、应用与发展。
未来,影眸科技还将持续与 NVIDIA 展开合作,探索前沿人工智能、计算机视觉技术在大众娱乐市场的推广应用。
点击“阅读原文”,了解更多关于 NVIDIA Omniverse 的信息并免费试用。