NVIDIA 在2024 年Unreal Fest 上推出了新插件，旨在簡化Windows PC 上基於人工智慧的MetaHuman 角色的創建與部署。該插件支援NVIDIA ACE，提供自然語言處理、語音和動畫功能。新版本包括Audio2Face-3D 插件，可簡化Maya 中的臉部動畫開發，並提供原始程式碼進行客製化。此外，NVIDIA 還推出了支援Linux 的渲染器微服務，透過虛幻像素串流實現高保真角色串流。開發者可存取GitHub 以取得各種資源，以高效創建響應靈敏的MetaHuman 角色。
麗貝卡·莫恩2024 年10 月2 日06:20
NVIDIA 為人工智慧驅動的MetaHuman 角色引入了新的虛幻引擎5 插件，從而簡化了ACE 技術的部署。
在Unreal Fest 2024 上，NVIDIA 推出了適用於NVIDIA ACE 的全新虛幻引擎5 裝置上插件，旨在簡化Windows PC 上人工智慧驅動的MetaHuman 角色的建立和部署。根據NVIDIA 技術部落格介紹，ACE 是一套數位人類技術，提供由生成式AI 驅動的語音、智慧和動畫。
新插件和功能
最新版本包括用於Autodesk Maya 中AI 驅動的臉部動畫的Audio2Face-3D 插件。該插件提供了一個簡化的介面，可以加快Maya 中的化身開發，並提供原始程式碼，以便在其他數位內容創建工具中進一步自訂。
NVIDIA 也利用Epic 的虛幻像素串流技術開發了虛幻引擎5 渲染器微服務。此微服務在搶先體驗階段支援NVIDIA ACE Animation Graph 微服務和Linux 作業系統。動畫圖微服務可實現逼真的角色運動，並且透過虛幻像素串流，開發人員可以將MetaHuman 創作串流傳輸到任何裝置。
增強的開發者資源
NVIDIA ACE Unreal Engine 5 範例專案指導開發人員將ACE 整合到他們的應用程式中。此專案擴展了設備上ACE 插件的數量，包括：
Audio2Face-3D 用於唇形同步和臉部動畫
用於產生響應的Nemotron Mini 4B Instruct 模型
上下文資訊的檢索增強生成(RAG)
這些微服務針對Windows PC 上的低延遲和最小記憶體使用進行了最佳化，使開發人員能夠有效地創建響應靈敏的MetaHuman 角色。
使用Maya ACE 插件簡化3D 動畫
Autodesk Maya 以其高性能動畫功能而聞名，現在支援Audio2Face-3D 插件，促進高品質、音訊驅動的臉部動畫。該插件的使用者介面允許無縫過渡到虛幻引擎5，並且可以針對其他數位內容工具自訂原始程式碼。
首先，開發人員應產生API 金鑰或下載Audio2Face-3D 微服務。該插件是NVIDIA NIM 的一部分，這是一套微服務，旨在加速跨雲端和資料中心的基礎模型部署。開發人員可以存取NVIDIA/Maya-ACE GitHub 儲存庫以取得所有必要的資源。
使用UE5 像素流擴展數位人類技術部署
透過雲端部署數位人類技術旨在覆蓋更廣泛的受眾。 NVIDIA ACE 中的全新虛幻引擎5 渲染器微服務支援動畫圖形微服務和Linux 作業系統，促進高保真字元流。此設定允許MetaHuman 角色在雲端伺服器上運行，並使用Web 即時通訊(WebRTC) 串流傳輸到瀏覽器和邊緣設備。
動畫圖微服務與AI 模型集成，為角色創建對話管道，維護上下文和歷史。 UE5 像素流相容性確保在各種應用程式中高效部署高品質的MetaHuman 角色。
入門
對虛幻引擎5 渲染器微服務有興趣的開發者可以申請搶先體驗。有關NVIDIA ACE 和NIM 微服務的更多信息，請訪問NVIDIA 技術部落格。
圖片來源：Shutterstock
資訊來源：由0x資訊編譯自BLOCKCHAINNEWS。版權所有，未經許可，不得轉載