輝達全面開源AI臉部動畫技術!所有人都可以免費使用
記者鄧天心/綜合報導
輝達NVIDIA宣布將旗下AI語音動畫技術「Audio2Face」全面開源,大幅降低開發門檻,Audio2Face可根據語音輸入,自動產生3D角色精準的嘴型同步及臉部表情,系統能即時分析音訊中的語音特徵(如音素或語調),將結果轉換為動畫資料,實現更自然的角色動作,不僅支援預錄內容,也能應用於即時直播、多語言溝通等互動場景。

延伸閱讀:
ChatGPT訂閱用戶也可以用「Pulse」功能!主動建議你的當天規劃
目前已有Codemasters、NetEase、Perfect World Games等知名遊戲廠商,將Audio2Face整合進開發流程,並配合Reallusion、Convai等軟體平台推出擬人化AI角色服務。新技術預計廣泛應用於遊戲、虛擬主播、客服、醫療等多元領域,提升虛擬角色的表達力與真實感。
這次不只開源模型與SDK,還釋出訓練框架,開發者可依個人需求微調模型、客製角色表情,強化角色風格與跨產業合作。NVIDIA強調,Audio2Face有助於推動數位人生態系統標準化,讓新創團隊與獨立開發者都能平等參與虛擬角色創新。
過去臉部動畫仰賴美術人員手工製作,耗時且難以即時反映角色情感,如今Audio2Face開源,AI可自動驅動角色,產業預期將催生更多互動型數位人、提升遊戲及各類服務互動體驗,真正拉近虛擬與現實世界的距離。