NVIDIA 現已開源 Audio2Face 模型與 SDK,讓所有游戲和 3D 應用開發者都可以構建并部署帶有先進動畫的高精度角色。NVIDIA 開源 Audio2Face 的訓練框架,任何人都可以針對特定用例對現有模型進行微調與定制。
NVIDIA Audio2Face 通過生成式 AI 驅動的實時面部動畫與嘴形同步,加速寫實數字角色的創作流程。Audio2Face 利用 AI 根據音頻輸入生成逼真的面部動畫。這項技術通過分析音素、語調等聲學特征,創建動畫數據流,并映射至角色的面部表情。這些動畫數據既可用于離線渲染預設的資產,也可實時傳輸到動態的、由 AI 驅動的角色,實現準確的嘴形同步與情感表達。
Audio2Face 模型已廣泛應用于游戲、媒體娛樂以及客戶服務等行業。眾多獨立軟件廠商 ISV 與游戲開發商都在其應用中采用了 Audio2Face。游戲開發者包括 Codemasters、GSC Game World、網易和完美世界。ISV 包括 Convai、Inworld AI、Reallusion、Streamlabs 和 UneeQ。
以下是開源工具的完整列表。

-
NVIDIA
+關注
關注
14文章
5592瀏覽量
109714 -
開源
+關注
關注
3文章
4203瀏覽量
46122 -
模型
+關注
關注
1文章
3751瀏覽量
52099
原文標題:NVIDIA 開源 Audio2Face 模型及 SDK
文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達】歡迎添加關注!文章轉載請注明出處。
發布評論請先 登錄
NVIDIA Alpamayo 1模型在Hugging Face平臺下載量已突破10萬次
NVIDIA推動面向數字與物理AI的開源模型發展
NVIDIA推出面向語言、機器人和生物學的全新開源AI技術
NVIDIA宣布開源Aerial軟件
NVIDIA ACE現已支持開源Qwen3-8B小語言模型
NVIDIA 利用全新開源模型與仿真庫加速機器人研發進程
什么是AI模型的推理能力
NVIDIA Jetson + Isaac SDK 在人形機器人領域的方案詳解
如何本地部署NVIDIA Cosmos Reason-1-7B模型
NVIDIA Isaac GR00T N1開源人形機器人基礎模型+開源物理引擎Newton加速機器人開發
英偉達GTC25亮點:NVIDIA Dynamo開源庫加速并擴展AI推理模型
NVIDIA發布全球首個開源人形機器人基礎模型Isaac GR00T N1
NVIDIA 發布全球首個開源人形機器人基礎模型 Isaac GR00T N1——并推出加速機器人開發的仿真框架
NVIDIA開源Audio2Face模型及SDK
評論