NVIDIA ACE

NVIDIA ACE（Avatar Cloud Engine）是英偉達於2023年5月首次發布的生成式人工智慧技術套件，旨在通過整合語音識別、自然語言處理及面部動畫生成等模組，為虛擬角色賦予實時互動能力。2024年6月，該技術正式提供推理微服務（NVIDIA NIM），支持在超過1億台RTX AI PC部署。其核心技術包括Audio2Face音頻驅動面部動畫、Riva語音互動系統及Nemotron語言模型，已套用於遊戲、客戶服務、醫療健康等領域。截至2025年，網易、育碧等企業將其套用於《永劫無間》《MIR 5》等遊戲開發。

基本介紹

• 開發者：英偉達（NVIDIA）
• 核心技術：生成式AI、語音識別、面部動畫
• 套用場景：遊戲NPC、虛擬客服、醫療諮詢
• 硬體支持：RTX AI PC、雲端部署
• 合作夥伴：Convai、網易、騰訊、育碧

技術架構

NVIDIA ACE技術套件整合多項生成式AI模組：

• 語音互動系統：採用NVIDIA Riva實現實時語音識別與多語言翻譯，支持每秒16000次採樣的音頻輸入
• 語言模型：基於NVIDIA NeMo框架定製角色對話規則，2025年新增Nemotron-3 4.5B模型最佳化終端推理效率
• 動畫生成：Omniverse Audio2Face通過音頻驅動面部表情，支持Unreal Engine 5的MetaHuman角色創建唇形同步動畫

核心功能

• 動態互動：NPC可基於環境感知與玩家行為發起自主對話，如《Kairos》演示項目中角色Jin實現母語級實時回響
• 長期記憶：虛擬角色根據歷史互動調整行為模式，如《MIR 5》AI Boss“阿斯特里昂”動態適配玩家策略
• 多模態渲染：整合Omniverse RTX實現4K級實時渲染，新增動畫協定最佳化眼球運動與微表情細節

行業套用

遊戲開發

• 網易《永劫無間》部署本地推理AI隊友，降低雲端算力依賴（2025年）
• 育碧《索利斯堡》採用Audio2Face生成角色動畫，實現口型與語音精確同步
• 掌趣科技Code Z平台集成ACE技術，支持開放世界遊戲NPC批量生成

客戶服務

• ServiceNow零售場景套用語音識別與翻譯模組，實現多語種虛擬導購
• UneeQ數字人平台通過ACE微服務最佳化銀行、電信行業諮詢互動體驗

醫療健康

• 英業達VRSTATE平台構建虛擬醫療顧問，支持症狀分析與就診建議生成（2025年）

硬體與部署

• 雲端協同：通過AI推理管理器（AIM）實現本地RTX GPU與雲端算力動態調度
• 終端適配：PC NIM微服務支持GeForce RTX AI PC部署，當前已有Aww Inc、Dell Technologies等十餘家企業將其集成至平台和套用
• 開發工具：提供虛幻引擎5外掛程式、Tokkio工作流程參考及GitHub開原始碼庫

合作夥伴網路

英偉達已與12家企業建立技術合作，典型案例包括：

• Aww Inc.：升級虛擬名人Imma的實時動畫系統，實現直播互動表情生成與口型同步
• 戴爾科技：預裝ACE開發套件至Alienware系列產品，最佳化遊戲本端側推理性能
• 娛美德：在《MIR 5》《Black Vultures》中構建具備學習能力的AI敵人（2025年）