《通网股》宏达电找来NVIDIA 推动新XR虚拟化身相关应用

VIVERSE Avatar是一个开放式的虚拟化身创建系统,不仅提供多种全身虚拟形象风格,还支援VRM标准,允许用户导入VRM 3D模型虚拟形象,在VIVERSE中创建自己的身份。NVIDIA ACE(Avatar Cloud Engine)则是一套可以将虚拟化身变得栩栩如生,赋予数位人类充满生命力的技术。其中一项技术NVIDIA Audio2Face NIM微服务,可根据语音语调搭配出丰富的脸部表情。在本次SIGGRAPH 2024大会的NVIDIA新创企业创新展区,参观者透过VIVE XR Elite体验ACE NIM与VIVERSE Avatar即时整合展示。

Audio2Face NIM微服务支援多种语言,可应用于从卡通到写实等各种虚拟形象风格。这种多样灵活性与VIVERSE的开放平台方法相契合,允许用户使用开放的VRM标准导入虚拟化身,或者从头创建自己的卡通虚拟人物。透过Audio2Face NIM集成至VIVERSE Avatar中,团队可以更自然地协作互动,减少远程工作中的沟通问题。VIVERSE总经理林俊吴表示,整合NVIDIA ACE NIM微服务为宏达电的虚拟化身技术带来了更大的细腻度,双方联手克服了在XR协作中的一个重大挑战。

林俊吴进一步表示,开发3D模型物件绝非难事,但分享这些高细节图像却仍面临挑战。Polygon Streaming为未来虚拟体验开创了新的可能性,可以将任何设备转变为互动式产品展示、协作和沉浸式虚拟环境的载体。

NVIDIA数位人类产品管理总监Seth Schneider表示,在XR中释放更多动态互动的潜力一直是我们的关键追求,NVIDIA Audio2Face NIM与VIVERSE Avatar的整合实现了动态口型同步,增强了XR世界中虚拟化身的互动沟通体验。

其实之前宏达电就曾与NVIDIA合作,将NVIDIA CloudXR整合至VIVE Focus 3头戴装置中。此整合允许XR应用程式的远端渲染,使用者可以在沉浸环境中设计、修改和协作处理大型资产。