NVIDIA 虛擬人物技術讓 AI 遊戲角色栩栩如生

在 GDC 2024 和 GTC 2024 上,我們宣佈各行業的領先 AI 開發人員正在使用 NVIDIA 虛擬人物技術為商業應用和動態遊戲角色創建栩栩如生的化身。

NVIDIA 的虛擬人物技術套件包括用於語音和動畫的NVIDIA Avatar Cloud Engine (ACE)、用於語言的NVIDIA NeMo 以及用於光線追蹤渲染的NVIDIA RTX,使開發人員能夠建立能夠進行AI驅動的自然語言互動、進行對話的虛擬人物更真實、更動態。

使用者透過我們的虛擬人物平台合作夥伴提供的開發人員創作來體驗 NVIDIA ACE 技術。在展會上,開發者和平台合作夥伴推出了利用多項 NVIDIA AI 技術和 NVIDIA ACE 微服務的全新虛擬人物技術演示。繼續閱讀,了解 Hippocratic AI、Inworld AI、Perfect World Games、RealityArts Studio 和 UneeQ 如何在其遊戲、平台和應用程式中利用 NVIDIA ACE、NVIDIA NeMo 和 NVIDIA RTX 技術。

Inworld AI 和 NVIDIA 合作開發新的 Convert Protocol 技術演示 

在 GDC 2024 上,Inworld 和 NVIDIA 合作製作了名為 Covert Protocol 的新技術演示,以展示 NVIDIA ACE 技術和 Inworld 引擎。在 Covert Protocol 技術演示中,您扮演私家偵探,根據與場景中角色的對話結果完成目標。 Covert Protocol 透過 AI 虛擬人物解鎖社交模擬遊戲機制,充當關鍵訊息的保管者、提出挑戰並促進關鍵敘事的發展。虛擬人物在體驗中發揮著至關重要的作用。

在 Inworld 引擎的支援下並利用 NVIDIA ACE,每位玩家的 Covert Protocol 之旅都是獨一無二的。玩家的即時決策和策略規劃會導致不同的遊戲結果,確保沒有兩次遊戲是相同的。這種AI驅動的互動性和玩家代理水平為新興遊戲玩法開闢了新的可能性,玩家必須立即思考並即時調整策略,以應對錯綜複雜的遊戲世界。

Covert Protocol 基於Unreal Engine5 構建,利用Inworld 的SDK 使與MetaHuman 的集成變得快速、簡單,並結合了NVIDIA ACE 技術,包括NVIDIA Riva 自動語音識別(ASR) 和NVIDIA Audio2Face (A2F),以增強Inworld 的語音和動畫管道。 

 

“NVIDIA ACE 微服務和 Inworld 引擎的結合使開發人員能夠創建能夠驅動動態敘事的數位角色,為遊戲玩家如何破解、推理和玩遊戲開闢了新的可能性。” Inworld AI 執行長 Kylan Gibbs 說。

為了加速開發者採用,Inworld 將在不久的將來發布 Covert Protocol 的源代碼,使開發者能夠從技術演示中學習,並使用它來創造自己的創新。

Ubisoft 的 NEO NPC 利用 Inworld AI 和 NVIDIA ACE 技術探索虛擬人物在遊戲中的可能性

Ubisoft正在探索具有動態非玩家角色(NPC)的新型互動遊戲,隨著生成式 AI 技術的出現,這一領域正在發生革命性的變化。「NEO NPC」是他們最新研發項目的產物,是一種旨在進行互動的高級NPC。與玩家、他們的環境和其他角色即時互動,為動態和突發的故事講述開闢了新的可能性。

Ubisoft透過三個獨立的演示場景展示了這些 NEO NPC 的功能。每個場景著重於 NPC 行為、環境和情境意識的不同面向;一系列即時反應和動畫;以及對話記憶、協作和策略決策。結合起來,這些實驗發現突破了遊戲設計和沈浸感的界限。

透過 NEO NPC,Ubisoft的敘事和動畫設計師將腳本遊戲元素的可靠性與玩家自發性互動的活力融為一體,將遊戲開發的未來推向新的境界。

利用 Inworld AI 技術,Ubisoft的敘事團隊創造了兩個 NEO NPC:Bloom 和 Iron,他們擁有自己的背景故事、知識庫和不同的對話風格,從而在演示宇宙中建立了這些獨特的角色。

Inworld 技術也為 NEO NPC 提供了對其周圍環境的內在了解,以及 Inworld 法學碩士提供的互動式回應。 NVIDIA Audio2Face 為兩個 NPC 的臉部即時提供臉部動畫和口型同步。

夢幻新誅仙和 Unawake 也將 Audio2Face 納入開發流程 

Perfect World Games 的《夢幻新誅仙》是一款即將推出的Unreal Engine 5 大型多人線上角色扮演遊戲,也是該公司廣受歡迎的《夢幻新誅仙》的續作。

遊戲中捕獲的新影片展示了離線渲染的 NVIDIA Audio2Face 技術,可產生準確的中文和英文口型同步,使劇本編寫者能夠輕鬆地向《玉皇朝》世界添加新的配音內容。 Audio2Face可用於輕鬆支援遊戲的多語言版本。

在 RealityArts Studio 和 Toplitz Productions 的Unreal Engine 5 驅動的 Unawake 中,您將在來自天堂和地獄的噩夢生物之間無情戰爭的混亂中決定人類的命運。在這場動作冒險遊戲中,在激烈的第一人稱混戰小衝突中與對手進行懲罰或赦免。你是最後的堡壘。

Unawake 利用 Audio2Face 在遊戲過程中和高保真電影中創建角色的臉部動畫。觀看下面的新 Unawake 影片,了解 Audio2Face 的實際應用,並繼續關註今年晚些時候發布的遊戲,該遊戲還採用了具有畫格生成功能的 DLSS 3。

 

NVIDIA ACE 技術:利用 Hippocratic AI 和 UneeQ 建構虛擬人物和虛擬助理的模組

為了展示 NVIDIA 虛擬人物技術的新功能,我們與 Hippocratic AI 和 UneeQ 等領先公司合作,進行了一系列新技術演示。

HippocraticAI 創建了一個注重安全、由法學碩士支援、特定任務的醫療保健代理。代理人透過電話打給病人、跟進護理協調任務、提供術前指導、執行出院後管理等等。對於 GTC,NVIDIA 與 HippocraticAI 合作擴展了其解決方案,以使用 NVIDIA ACE 微服務、NVIDIA Audio2Face 以及 NVIDIA Animation graphNVIDIA Omniverse Streamer Client,以展示生成式 AI 醫療保健代理程式化身的潛力。

Hippocratic AI 聯合創始人兼首席執行官 Munjal Shah 表示:“我們的數位助理為世界各地的患者提供有用、及時和準確的信息。” “NVIDIA ACE 技術透過尖端的視覺效果和逼真的動畫讓它們栩栩如生,有助於更好地與患者建立聯繫。”

 

UneeQ 是一個自主數位人平台,專門為客戶服務和互動式應用程式創建AI驅動的化身。 UneeQ 的虛擬人物在線上代表品牌,與客戶即時溝通,讓他們對購買充滿信心。 UneeQ 將 NVIDIA Audio2Face 微服務整合到其平台中,並將其與 Synanim ML 結合,創建高度逼真的化身,以提供更好的客戶體驗和參與度。

UneeQ 執行長兼創辦人Danny Tomsett 表示:「UneeQ 將NVIDIA 動畫AI 與我們自己的Synanim ML 合成動畫技術相結合,提供具有情感響應的即時虛擬人物交互,並提供由對話式AI 驅動的動態體驗。 」

 

NVIDIA 處於生成式AI 的前沿,採用NVIDIA ACE 的開發者和平台包括:ConvaiCyber AgentData MonstersDeloitteHippocraticAIIGOODIInworld AIMedia.MonksmiHoYo網易遊戲Perfect WorldOpenstreamOurPalmQuantiphiRakutenSlalomSoftServeTencentTop Health TechUbisoftUneeQ 和 Unions Avatars。前往他們的網站,了解他們如何利用虛擬人物技術來創造新的可能性並增強客戶體驗。

NVIDIA ACE:讓數位角色栩栩如生

頂級遊戲和虛擬人物開發人員正在開創性地使用 ACE 和生成式 AI 技術來改變遊戲和應用程式中玩家與 NPC 之間的互動。了解更多有關 NVIDIA ACE、未來發展和搶先體驗計劃的資訊。請造訪 GeForce.com,以了解 NVIDIA RTX 技術和 GeForce RTX GPU 在最新遊戲中的更多用途。