NVIDIA 利用 ACE 自主遊戲角色重新定義遊戲 AI

「 AI 」一詞已在遊戲中使用數十年。這些不可玩的角色 (NPC) 傳統上遵循嚴格的規則,以模仿智慧、遵循引導的故事,並與玩家依據腳本進行互動。然而,隨着智慧語言模型的興起,遊戲 AI 為真正智慧的大變革做好準備。

在 2025 年消費電子展上,NVIDIA 推出 NVIDIA ACE 自主遊戲角色,重新定義遊戲 AI 。

首次於 2023 年推出的NVIDIA ACE 是一款 RTX 加速的數位人類技術套件,透過生成 AI 讓遊戲角色栩栩如生。

NVIDIA 如今將 ACE 從對話式 NPC 擴展至自主遊戲角色,這些角色可利用 AI ,跟人類玩家一樣感知、規劃和行動。在生成式 AI 的支援下,ACE 將打造一個生動、動態的遊戲世界,其中的同伴可以理解並支持玩家的目標,而敵人則可以動態地適應玩家的策略。

支援這些自主角色的是新的 ACE 小型語言模型(SLM),能夠以現實決策所需的類人類的頻率進行規劃,以及用於視覺和音頻的多模態 SLM,使 AI 角色聽到音訊提示並感知其環境。

NVIDIA 正與領先的遊戲開發商合作,將 ACE 自主遊戲角色納入遊戲。在《絕地求生》《inZOI》《誅仙世界》手遊電腦版的類人類玩家與夥伴互動。在《MIR5》與不斷學習的 AI 頭目作戰,而且這些頭目會適應您的遊戲風格。並在《AI People》《Dead Meat》《動物龐克》體驗 AI 驅動的 NPC 全新遊戲機制。

解析人類決策過程

先從人類如何做出決定的簡單模型著手。

決策的核心是與自我的內心對話,反覆問同一個問題:「下一步該怎麼辦?」

為了把這個問題答得漂亮,我們需要一些關鍵資料:

  1. 來自世界各地的資訊
  2. 我們的動機與慾望
  3. 先前事件與經歷的記憶

舉例來説,假設您聽到電話鈴聲,即由您的感官產生的外部感知。您是否應該接聽?

您記得自己正在等一通電話,不想錯過。您的動機與記憶結合在一起,可提供決定下一步該怎麼做。這就是認知。

您選擇接聽電話,這是人類認知的動作與結果。

這些感知、認知、和動作通常儲存在我們的記憶中,以供日後回憶及做出決策。

適用於自主遊戲角色的全新 NVIDIA ACE AI 模型

倘若用傳統的規則式 AI 系統模仿這些人類特徵,開發人員將無法編寫程式,因為可能的場景數目無窮無盡。 但在生成式 AI 以及訓練數萬億句子的大型語言模型的幫助下,我們可以開始模擬類似人類的決策。

NVIDIA ACE 自主遊戲角色由一套生成式 AI 模型驅動,用於感知、認知、動作與渲染,可讓開發人員在遊戲中創造更像人類思考、感覺與行動的 AI 代理。

感知 - 感知世界的模型

為了讓 SLM 做出正確的決定,必須向自主遊戲角色提供高頻率的感知資料流。目前有多種模型與技術來捕捉此感官資料:

  • 音訊
    • NemoAudio-4B-Instruct - 全新 Audio+Text in 與 Text out SLM 可描述遊戲環境的聲音
    • Parakeet-CTC-XXL-1.1B-Multilingual - 將多語言音訊轉錄為文字
  • 視覺
    • NemoVision-4B-128k-Instruct - 全新 Audio+Image in 與 Text out SLM 可進行簡單的空間理解
  • 遊戲狀態
    • 遊戲世界的最佳資訊來源之一是遊戲本身。遊戲狀態可轉錄成文字,以便 SLM 對遊戲世界進行推理

認知 - 思考世界的模型

根據我們的電競研究,大多數遊戲玩家每秒鐘會做出 8 至 13 個微小的決定,其稱為「子動作」。這些可能是糾正目標方向或決定何時使用技能等簡單的任務,或決定何時使用技能,或決定開始重新評估策略等更複雜的任務。

一般而言,認知任務非常頻繁,需要小型語言模型來執行任務,才能滿足延遲與輸送量的要求。針對認知的 ACE SLM 包括:

  • Mistral-Nemo-Minitron-128k-Instruct - 一款尖端的小型語言模型,在指令執行能力方面名列前茅,是自主遊戲角色的關鍵能力
  • Mistral-Nemo-Minitron-4B-128k-Instruct - 相同模型,只不過尺寸更小
  • Mistral-Nemo-28B-128k-Instruct - 甚至更小!即需 1.5GB 的 VRAM 即可運行

行動 - 世界行動榜樣

採取行動有多種形式,從言語、遊戲動作到長期規劃。為了有效執行行動,開發人員可運用模型與策略的組合:

  • 動作選擇 - 鑑於遊戲中可採取的有限動作,SLM 可選擇最適當的行動(如下文 《inZOI》 所示)
  • 文字轉語音- Elevenlabs.io Cartesia 等優秀的文字轉語音模型可將文字回應轉換為聽覺回應
  • 策略規劃 - 在處理和推理大量資料的語料庫時,這些代理可接觸較大的模型,這些模型提供更高層次、更低頻率的策略。通常情況下,這是雲端 LLM API 或是針對 SLM 的 CoT (思想鏈) 系列提示
  • 反思 - 其中一個重要的動作是對先前行動的結果進行反思。「我的選擇是對的嗎?」 此動作可隨著時間的推移,產生更佳的未來動作,並讓角色自我糾正

記憶 - 記住世界的模型

記憶對於自主遊戲角色回憶先前的感知、行動與認知至關重要。此外,它還有助於追蹤長期目標和動機,而這些目標和動機與即時情境可能不太相關。透過「檢索增強生成 (RAG)」技術,開發人員可使用相似性搜尋,來「記住」目前提示的相關資訊:

  • E5-Large-Unsupervised - NVIDIA 遊戲內推理 SDK,開發人員可透過我們最佳化的嵌入模型,在遊戲過程中嵌入。

我們的合作夥伴結合上述模型與技術,打造出首款自主遊戲角色體驗。我們這就一瞥未來吧。

自主角色登陸遊戲 - 從聰明的 AI 隊友到千變萬化的敵人

NVIDIA ACE 角色扮演自主小隊成員,執行命令、收集和分享戰利品,並與敵人交戰。 他們可獨立感知並理解周圍發生的動態事件來提供策略建議,並採取必要步驟完成行動或命令,而無需玩家的額外提示或協助。

在 AI 的強大功能下,這些遊戲玩家可利用先前提到的一切,創造出通常只有與人類隊友才能體驗的動態遊戲體驗。

《絕地求生》IP 系列推出可共同遊玩的角色

《絕地求生》是定義派別的大逃殺遊戲,,玩家爭相競逐為最後的生還者。《絕地求生》以激烈的戰術遊戲玩法、逼真的戰鬥場景,以及廣闊的地圖為特色,自 2017 年推出以來,已經成為一種文化現象,而且仍是 Steam 每天遊玩次數最多的五大遊戲之一。

2025 年,《PUBG 》IP 系列遊戲將與 PUBG Ally 一起推出可共同遊玩的角色 (CPC)。Ally 採用 NVIDIA ACE 打造的 Mistral-Nemo-Minitron-8B-128k-instruct 小型言模型,可讓 AI 隊友使用遊戲特定的語言溝通、提供即時策略建議、尋找並分享戰利品、駕駛車輛,以及使用遊戲中的大量武器庫與其他人類玩家戰鬥。

 

「《絕地求生》IP 系列的 PUBG Ally 與《ZOI》的 Smart Zoi 作為全球第一款採用 NVIDIA ACE 打造的 CPC (可共同遊玩的角色),正在釋放全新且獨特的體驗。 KRAFTON 對於 ACE 自主遊戲角色的可能性,以及 AI 將如何強化遊戲創作的方式,感到興奮。」 - KRAFTON 深度學習部門主管 Kangwook Lee

《永劫無間》電腦 AI 夥伴

2025 年 3 月,網易將將為《永劫無間》手遊電腦版發布由 NVIDIA ACE 打造的本機推斷 AI 隊友功能,而2025 年晚些時候,電腦版的《永劫無間》也將加入該功能。《永劫無間》是 Steam 每週遊玩次數最多的 10 大遊戲之一,《永劫無間手遊電腦版》自稱每週有數百萬名遊戲玩家在手機、平板電腦與電腦上遊戲。

在《永劫無間》手遊電腦版以近戰為主的大逃殺遊戲中,最多可容納 40 名遊戲玩家,在大型環境中作戰,使用一套獨特的穿越能力、戰鬥技能和遠東風格的武器,玩家在尋求勝利時用它來連擊、招架和對抗敵人。

由 NVIDIA ACE 驅動的 AI 隊友可加入您的隊伍,與您並肩作戰,找到您所需的特定道具、更換裝備、就解鎖技能提出建議,並以能幫助您取勝的方式進行遊戲。

 

「NVIDIA 可讓遊戲開發人員以 AI 技術突破預期的界限。 《永劫無間》手遊電腦版的 NVIDIA ACE 可讓我們創造 AI 自主角色,讓我們創造在裝置本機執行的 AI 自主隊友,在精彩絕倫的戰鬥中自然地協助玩家。」 – 網易集團資深副總裁 Thunder Fire BU 主管胡志鵬。

《inZOI》推出採用 NVIDIA ACE 打造的智慧型 Zoi

KRAFTON 的 inZOI是 Steam 最受歡迎的 10 大遊戲之一。即將推出的生活模擬遊戲可讓玩家改變遊戲世界的任何方面,創造獨特的故事與體驗。《inZOI 》逼真的繪圖技術,可讓玩家透過 Unreal Engine 5 開發,以遊戲中易於使用的創作工具,恣意將想像力化為視覺。自訂角色的外觀與服裝,並使用各種可自由移動的家具與結構,打造夢想家園。

採用 NVIDIA ACE 打造,《inZOI 》引進 Smart Zoi,這個可共同遊玩的角色 (CPC),回應能力和逼真度都是前所未有地強。玩家將體驗全面的社群模擬。在城市中的每個 ZOI 都在生活目標的驅動下自主行動,並根據環境與周圍發生的事件做出反應,進而導致更深層次的沉浸感與複雜的社會情境。

以下影片透過對 LM 前 (語言模型) 與 LM 後場景的對比,示範尖端裝置上 LM 技術對《inZOI》角色互動與行為的深遠影響。

 

NVIDIA ACE 為《MIR5》中的首個 AI 頭目提供動力

NVIDIA ACE 角色還可在單人遊戲、合作遊戲及多人遊戲中充當對手。

與傳統腳本編寫的頭目不同,您將面對能夠持續從玩家的行為和動作中學習的敵人。他們會反制您最常用的策略、技能和法術,迫使您不斷適應。與擁有動態調整攻擊的頭目戰鬥,需要您提升現實中的操作技巧,而不僅僅是記住攻擊模式。加入擁有持續存在的敵方派系的超大規模多人世界,這些派系會根據玩家的戰術進行調整。可能性無窮無盡,憑藉動態 AI,每場戰鬥都將獨一無二,使遊戲體驗更加令人興奮和引人入勝。

Wemade Next 的 《MIR5》是超熱門的《Mir 傳奇》系列的最新力作,將使用 NVIDIA ACE 來強化 頭目的遭遇。透過 ACE 技術,頭目會從之前與玩家的對壘中學習,並適應 MMORPG 玩家使用的戰術、技能和裝備。

《MIR5》的 AI 將評估目前所面對的人類的現有裝備和設置,將其與過去的對壘進行比較,並決定獲得勝利的最佳行動方案。使用 ACE 技術,每場 Boss 戰都獨具特色。即使回頭挑戰已經擊敗過的頭目,戰鬥也會以不同的方式展開,讓玩家時刻保持警覺,進而使遊戲體驗更加引人入勝。

 

「我們與 NVIDIA 攜手,開啟了 NVIDIA ACE 自主遊戲角色的遊戲新時代。 《MIR5》的 AI 頭目是遊戲的里程碑,每一次遊戲都會遇到獨一無二的頭目。 我們很高興看到這項技術如何顛覆遊戲。」 - Wemade Next 執行長 Jung Soo Park

NVIDIA ACE 利用對話式 AI 驅動新的遊戲類型

多位開發人員正在使用 NVIDIA ACE 打造全新類型的遊戲,對話、對抗與互動完全由玩家提示與 AI 生成的回應驅動。 這些角色不僅會對話,而且會在遊戲中採取行動,讓玩家以新的沉浸式方式與遊戲互動。 

《Dead Meat》

Meaning Machine 的《Dead Meat》是一款即將推出的謀殺謎團遊戲,遊戲玩家可使用聲音或鍵盤向嫌疑人詢問任何問題。想要討論嫌疑人的不在場證明?向他們探究生命的意義?向您的愛人告白?你的話語具有力量,任何事都可能發生。說服、操縱、威脅他們,甚至引誘他們洩密。審訊室是您的沙箱,您的想像力是唯一的極限。為了獲得真相,您會問些什麼?

 

在 2025 年消費電子展上,《Dead Meat》在 GeForce RTX 50 系列 GPU 上即時執行,首次在本機生成對話。在此之前,該遊戲使用雲端的 LLM,但透過與 NVIDIA 合作,Meaning Machine 開發出可在「裝置」本機執行的《Dead Meat》版本。

採用 Meaning Machine 的 Game Conscious AI,結合 NVIDIA ACE、NVIDIA Mistral-NeMo-Minitron-8B-128K 小型語言模型 (SLM)、Eleven Labs 的文字轉語音 (TTS) 技術以及 OpenAI 的 Whisper 自動語音識別 (ASR),新版本的《Dead Meat》實現了與雲端相同的角色深度,但現在對話文子是直接在 GPU 上本地生成的。

為了達到這種對話品質,Meaning Machine 使用自己的對話資料,然後將該模型與 Game Conscious™ 系統整合。準備好今年晚些時候釋放內心的偵探魂,並密切關注 《Dead Meat》的 Steam 頁面,以參加即將推出的試玩版。

《AI People》

《AI People》是 GoodAI 的獨特沙箱遊戲,玩家與 AI 驅動的 NPC 一起創造並玩遊戲,這些 NPC 會自主地與彼此、環境和玩家互動,創造出 AI 生成的動態敍事。

每台 NPC 均採用大型語言與語音識別模型,在 GeForce RTX GPU 或雲端本機執行,可與環境及內部物件互動。這些 NPC 會學習、體驗情緒、追求目標、夢想、說話,並創造充滿活力的故事,讓您親身體驗其中的精彩。

請在下方的 《AI People》影片中搶先體驗:

 

《動物龐克》技術示範

《暗影火炬城》是一款廣受歡迎的類銀河戰士惡魔城遊戲,採用 DLSS、Reflex 與光線追蹤。其開發商 TiGames 現已推出 《動物龐克》,這是未來專案的技術示範。

TiGames 的 AI 技術示範採用 NVIDIA ACE、Audio2Face 以及遊戲內首次使用裝置 Stable Diffusion 影像生成技術,帶領玩家在雲海上的浮動廚房對話與互動。

與盟友談論任務中收集的情報,然後前往碼頭設計一艘新軍艦,協助 Rayton 對抗機械帝國的戰爭。使用本機託管的 Stable Diffusion 影像生成技術,您可以透過語音轉文字輸入要求新的戰艦設計,並調整其塗裝,而無需調整數十個滑桿。

 

請繼續關注 TiGames 網站,深入瞭解他們即將推出的專案。

NVIDIA Audio2Face 加速遊戲創作

除了驅動自主遊戲角色,開發人員還在 NVIDIA Audio2Face 的遊戲中使用 ACE 技術驅動 AI 支援的臉部動畫與對嘴。 利用 Audio2Face,開發人員可輕鬆為以前僅具有基本唇部動作的人物製作動畫。 配音員錄製台詞,然後輸入 Audio2Face,在其中為角色臉部、眼睛、舌頭與嘴唇相應地製作動畫,為開發人員節省大量時間和金錢。

《異形:無序侵入》

Survio 的《異形:無序侵入》採用 NVIDIA Audio2Face 技術,現已在 PCVR 與 PSVR2 上推出。 《異形:無序侵入》是一款動作恐怖的虛擬實境遊戲,這部原創故事可讓遊戲玩家完全沉浸在恐怖的外星宇宙中。 這部充滿熱情的作品是由異形粉絲為異形粉絲設計的。

在求生之旅中,遊戲玩家會遇到一些由 Audio2Face 驅動的人形倖存者,根據配音員錄製的對話,生成逼真的臉部動畫。

 

《誅仙世界》

Perfect World Games 的《誅仙世界》是基於 Unreal Engine 5 的大型多人線上角色扮演遊戲,也是廣受開發人員歡迎的《《誅仙》續作。在遊戲中,您可以體驗 100 名玩家的大規模戰鬥的震撼、地下城探索的刺激,以及御劍飛行於雲端的自由。無論您喜歡 PVP、PVE 還是 PVX ,都有一條通往不朽的獨特之路等待您探索。

一段全新影片展示了開發人員在為大量中英文角色添加 NVIDIA Audio2Face 功能方面的進展,並深入幕後揭露動畫如何根據錄製的配音中檢測到的不同變數進行動態調整。如果需要進一步修改,開發人員當然可以隨時介入,根據場景需求調整對話,打造更合適的遊戲體驗。

NVIDIA ACE:自主遊戲角色

在生成式 AI 的協助下,玩家將體驗全新形式的遊戲,將遊戲提升至全新境界。頂尖遊戲開發商已經開始以《絕地求生》《inZOI》《MIR5》《永劫無間》手遊電腦版等經典遊戲,展示無窮可能。這些例子只是冰山一角,敬請期待令人亢奮的 2025 年。

深入瞭解 NVIDIA ACE、未來開發專案及搶先體驗計畫。此外,請務必查看所有其他 GeForce RTX 50 系列公告,瞭解我們如何進一步提升遊戲與應用程式的體驗,並推出創新技術,推動電腦產業。