
【鋒巢網】
近日,全球智能移動設 與沉浸式科技的創新領袖 HTC VIVE 在 SIGGRAPH 2024 大會上 宣布將與英偉達(NVIDIA)合作,將 NVIDIA ACE 技術集成到 VIVERSE 虛擬形象系統?(VIVERSE Avatar)中,增強其在擴展現實(XR)中互動的真實感和真實性。
HTC VIVE 的沉浸式 XR 開放平臺 VIVERSE 一直致力于為用戶提供最具沉浸感的使用體 驗。VIVERSE Avatar 是一個開放的虛擬形象創建系統,不僅提供多種全身虛擬形象風格,還允許用戶導入 VRM 3D 模型虛擬形象,在 VIVERSE 中創建自己的身份。
NVIDIA?ACE 是一套可以將數字人變得栩栩如生的技術。其中一項技術 NVIDIA Audio2Face NIM 微服務,可以根據語音語調匹配出豐富的面部表情。在本次 SIGGRAPH 2024 大會的 NVIDIA Inception 初創企業創新區,參觀者可以戴上 VIVE XR 精英套裝,體驗ACE NIM 與 VIVERSE Avatar 的實時集成演示。
Audio2Face NIM 支持多種語言,可以應用于從卡通到寫實等各種虛擬形象風格。這種多 樣性與 VIVERSE 的開放平臺方法完全契合,用戶可以使用開放的 VRM 標準導入虛擬形象,或者從頭創建自己的卡通頭像。通過將 Audio2Face NIM 集成到 VIVERSE Avatar 中,團隊可 以更自然地協作,減少遠程工作中的溝通問題。根據《福布斯》雜志報道,超過 50%的遠程員工經歷過這種問題。

NVIDIA?ACE 的集成演示彰顯了 VIVERSE 對不斷提升協作和生產力功能的承諾。早些時 候,VIVERSE 便已推出了獨家 3D 串流技術——Polygon Streaming,一種低延遲、高保真度 的 3D 模型可視化技術。Polygon Streaming 用途廣泛,可以應用于建筑和設計等領域,提供可視化 3D 模型。
“集成 NVIDIA ACE NIM 微服務為我們的虛擬形象技術帶來了更大的細膩度,聯手克服了 XR 協作中的一個重大挑戰,”VIVERSE 總經理林俊吳表示。“我們很高興參加今年的創新 區,展示 HTC VIVE 和 NVIDIA 技術結合帶來的影響。”
“在 XR 中釋放更多動態互動的潛力一直是一個關鍵追求,”NVIDIA?數字人產品管理總監 Seth Schneider 說。“NVIDIA Audio2Face NIM 與 VIVERSE Avatar 的集成實現了動態口型同步,增強了對話體驗。”
HTC VIVE 的沉浸式 XR 開放平臺在各行各業中展示出了重要作用。例如,HTC VIVE 曾 與美國貝爾直升機公司(Bell Helicopter)和硬石酒店(Hard Rock Hotel)合作,使用 VIVE 的 VR 頭戴設備進行設計和原型制作。這些合作大大加快了項目進度并降低了成本,節省了數年時間和數百萬美元。

通過創造更具吸引力的虛擬環境,提供先進的 XR 培訓,促進更好的協作等方式,VIVERSE 沉浸式 XR 開放平臺為組織提供了巨大的價值。例如,遠程團隊可以在虛擬會議中互動,增強溝通和生產力。此外,XR 培訓可以模擬真實場景,為員工提供安全有效的技能培養 方式。
HTC VIVE 之前曾與?NVIDIA 合作,將 NVIDIA CloudXR 集成到 VIVE Focus 3 頭顯中。此集成允許 XR 應用程序的遠程渲染,用戶可以在沉浸環境中設計、修改和協作處理大型資產。HTC VIVE 將繼續為全球用戶提供最有效和最前沿的沉浸式解決方案。欲了解更多信息,請訪問 VIVERSE 網站,并試用 NVIDIA Audio2Face 預覽。