NVIDIA 與開發商攜手合作,利用 NVIDIA ACE 數位化身雲端引擎,為遊戲和應用程式開創栩栩如生的數位角色

NVIDIA ACE(Avatar Cloud Engine)是一套可協助開發人員使用生成式AI將數位化身變為現實的技術。透過 ACE,非玩家角色 (NPC) 可以轉變為動態的互動式角色,能夠發起對話,或提供遊戲知識來幫助玩家完成任務。

在 CES 2024 上,我們宣布推出ACE 產品級微服務 ,提供頂尖數位化身開發人員NVIDIA Audio2Face (A2F) 和 NVIDIA Riva 自動語音辨識 (ASR)。

我們還與 Convai 合作發布了 Kairos 演示的最新版本,以展示下一代 AI NPC 將如何徹底改變遊戲。 Convai 是一個 NPC 開發者平台,可以讓開發者輕鬆地讓 3D 世界中的角色擁有類似人類的對話、感知和動作能力。

 

NVIDIA ACE 微服務已正式上線

透過 ACE,中介軟體、工具,和遊戲開發人員可以採用最先進的 AI 模型(例如 A2F 和 Riva ASR),並運用於遊戲和應用程式的數位化身裡。

Riva ASR 讓玩家能夠透過麥克風與 AI 角色交談,而不是對著它打字。 ASR 模型的目標是讓遊戲玩家能夠隨意自然地說話,從而實現身臨其境的動態對話。

Audio2Face 僅透過音訊來源(例如文字轉語音模型)為遊戲角色創建富有表現力的臉部動畫。 A2F 既可用於即時臉部表情和唇形同步生成,也可用於離線創建臉部表演。由於 NPC 聲線的不確定性,即時性成為 AI NPC 的必備要求。除了自由形式的 AI 對話之外,開發人員還需要 A2F 等模型來產生逼真的臉部表演。

頂尖遊戲和互動式數位化身開發商採用 NVIDIA ACE

頂尖的互動化身和遊戲開發人員正在開創 ACE 和生成式 AI 技術如何改變玩家與角色互動的方式。除了Convai之外,其他採用ACE的開發商還包括Charisma.AI, Inworld, miHoYo, NetEase Games, OurPalm, Tencent, Ubisoft, 和 UneeQ

Convai 創辦人兼執行長 Purnendu Mukherjee 表示:「虛擬世界中由生成式AI提供支援的角色,將創造出過去做不到的各種使用案例和體驗。Convai 將利用 Riva ASR 和 A2F,以低延遲回應時間和生動自然的動畫,創作出栩栩如生的NPC。」

騰訊遊戲表示: 「這是人工智慧技術在遊戲中運用的重要里程碑。NVIDIA ACE 與騰訊遊戲將為業界奠定基礎,為遊戲創作出個性鮮明、栩栩如生的數位化身及互動方式。」

「多年來,NVIDIA 一直是遊戲技術領域的領頭羊,提供全新的創新遊戲製作方式。 NVIDIA 正在透過遊戲 AI 技術的採用,讓遊戲變得更加智能和可玩,最終創造出更身臨其境的體驗。” ——網易資深副總裁、雷火事業群負責人胡志鵬

Kairos 演示隨著 Convai 的新技術不斷發展

與 NPC 進行開放式對話,為遊戲中的互動開啟了一個充滿可能性的世界。然而,對話應該產生可能導致潛在行動的後果。為了執行 NPC 的行動,他們需要了解周圍的世界並能夠進行動態互動。透過我們的合作夥伴 Convai 及其最新版本,我們將協作演示提升到了新的水平,使這些 AI NPC 具有以下新功能:

  • 空間意識 - 使遊戲角色能夠識別物體並與物體互動,並參與有關周圍環境的對話。例如,玩家可以指向物品,角色就會聰明地談論該物品。
  • 動作 - 使遊戲角色能夠根據對話與遊戲世界中的物品互動。例如,應要求提供一瓶清酒。
  • NPC 之間的互動 - 讓遊戲角色能夠相互互動,即使在玩家閒置時也能讓世界充滿活力。

此外,Convai 還整合了新的 NVIDIA ACE 微服務:Audio2Face 和 Riva ASR。透過在 Convai 管道中添加新的 ACE 微服務,遊戲角色在聆聽玩家講話時將改善口型同步、更好的表達和準確的語音檢測。

讓我們來看看新的 Kairos 演示。

 

NVIDIA ACE:讓遊戲角色栩栩如生

生成式 AI 技術將徹底改變遊戲,讓 NPC 能夠與玩家進行有意義的互動,超越預先錄製的腳本。你的行為可能會影響平民和關鍵人物的反應,你會得到獨特的互動,而不是照本宣科的反應。

NVIDIA 在所有產業的生成式AI 領域處於領先地位,在CES 2024 上,NVIDIA 宣布推出可實現超強生成式AI 校能的GeForce RTX SUPER 顯示卡、各大頂尖製造商推出的全新AI 筆記型電腦,以及面向開發人員的全新NVIDIA RTX 加速AI 軟體和工具和消費者,您可以在此處找到有關的完整詳細資訊。

訂閱以了解更多有關 NVIDIA ACE、未來發展和搶先體驗計劃的資訊。請造訪 GeForce.com.,以了解 NVIDIA RTX 技術和 GeForce RTX GPU 在最新遊戲中的更多用途。