概覽
NVIDIA Omniverse 是什麼？
NVIDIA Omniverse™ 函式庫是 NVIDIA Agent Toolkit 的一部分，提供預先建置的功能，用於建置模擬就緒世界，讓物理 AI 團隊在實際部署之前，用於訓練、測試與驗證系統。開發人員可將用於 OpenUSD 資料互通性、渲染、物理、感應器模擬、驗證與執行階段工作流程的函式庫、API 與服務，整合至現有應用程式，其中 AI 代理程式可將其作為工具，更快速地建置這些世界。
技術
核心 Omniverse 函式庫與服務
使用 Omniverse 函式庫與服務，將物理 AI 模擬能力整合至應用程式、工具與代理程式就緒工作流程中。
OpenUSD 資料與互通性
跨應用程式與模擬流程連接、整理並交換 3D 場景資料。
- 使用情境：您需要穩固的場景結構、素材移交或應用程式互通性。
- 代理程式就緒角色：代理程式可以檢查、組織、轉換及分發場景資料。
RTX 渲染與模擬
預覽場景、生成感測器輸出，以及從模擬就緒的世界中生成視覺證據。
- 使用情境：您需要視覺預檢、合成感應器輸出，或模擬就緒場景審查。
- 代理程式就緒角色：代理程式可觸發渲染、模擬感應器，以及傳回視覺證據。
物理模擬
模擬機器人與數位孿生工作流程的動作、接觸與具物理特性的行為。
- 使用情境：您需要測試碰撞、動作、動態或物理就緒狀態。
- 代理程式就緒角色：代理程式可執行物理就緒檢查，並分派問題以供審核。
模擬就緒的素材驗證
在下游訓練、測試或部署之前，根據模擬就緒需求檢查 OpenUSD 素材。
- 使用情境：在將素材移入物理 AI 模擬工作流程之前，需要先設置驗收閘門。
- 代理程式就緒角色：代理程式可執行驗證檢查，並傳回合格/失敗的證據。
入門選項
選擇如何使用 Omniverse 建置
根據您想要建置的內容，從函式庫、代理程式就緒工具、藍圖或範例工作流程開始。
使用案例
團隊如何將 Omniverse 用於物理 AI
-
工業設施數位孿生
-
機器人
模擬 -
機器人
學習 -
合成資料生成
-
自駕車模擬
工業設施數位孿生
準備工業環境，在實際部署前，用於測試、最佳化與驗證物理 AI 工作流程。
- 跨設計、工程與模擬工作流程連接 OpenUSD 場景資料。
- 新增 RTX 渲染、物理、感測器與驗證，讓設施為模擬做好準備。
- 利用代理程式就緒的工具檢查環境、顯現問題，並將證據送回審查。
Delta Electronics
機器人模擬
部署前，在模擬就緒環境中測試機器人行為、感知、運動與感測器互動。
- 準備包含材質、物理屬性、碰撞器、感測器與語意資料的 OpenUSD 場景。
- 執行視覺、感測器與物理預檢，檢查場景就緒情況。
- 利用代理程式就緒的工具檢查場景、呼叫模擬功能並分發問題，以供審核。
機器人學習
打造基於物理的模擬環境，用於機器人學習、測試與策略迭代。
- 透過感測器、物理、場景變化與驗證，設定任務就緒空間。
- 生成機器人學習、測試與策略評估工作流程的情境。
- 檢查場景就緒情況，並從模擬步驟回傳證據。
Agility, Apptronik, Fourier Intelligence, Unitree
合成資料生成
從模擬就緒的世界生成基於物理的合成資料，用於訓練與測試物理 AI 模型。
- 配置場景變化、感測器佈局、照明、材質與渲染輸出。
- 利用物理型渲染與感測器模擬產生合成資料。
- 觸發資料生成任務、檢查輸出，並標記問題以供審查。
自駕車模擬
準備模擬就緒的環境，用於測試感知系統、感測器與自駕車情境。
- 利用感測器就緒的 OpenUSD 資產，組織道路、設施與情境資料。
- 模擬攝影機、光學雷達、雷達與視覺預檢，實現感知工作流程。
- 在下游測試之前，檢查感測器設定並標記就緒問題。
客戶成功案例
實作中的物理 AI 工作流程
生態系統
橫跨物理 AI 生態系統的 Omniverse
了解合作夥伴與開發人員如何將 Omniverse 功能連接至物理 AI、數位孿生、機器人技術與模擬的應用程式與工作流程。
常見問題
NVIDIA Omniverse 提供函式庫、API、服務與代理程式就緒工具，用於建置物理 AI 應用程式與模擬就緒的 3D 工作流程。開發人員使用 Omniverse 將 OpenUSD 資料互通性、RTX 渲染、物理、感測器模擬、驗證與執行階段功能，整合至現有應用程式與工作流程。
開發人員可打造物理 AI 模擬應用程式、工業數位孿生、機器人模擬工作流程、合成資料流程，以及用於模擬準備 3D 世界的工具。Omniverse 協助團隊連接 3D 資料、模擬感測器與物理、驗證資產，以及從視覺 3D 內容轉向模擬就緒的環境。
AI 代理程式可將 Omniverse 功能作為可審核工作流程中的工具。代理程式可檢查 3D 場景或應用程式狀態，呼叫 Omniverse 工具進行 OpenUSD 操作、渲染、物理、感測器模擬或驗證，並在工作流程推進前，回傳證據供開發人員或技術美術審核。
是。Omniverse 函式庫與服務協助開發人員與軟體製造商將模擬功能新增至現有工具、服務與工作流程。這讓團隊在不取代差異化應用程式或使用者體驗的情況下，將 Omniverse 用於渲染、物理、感測器模擬、OpenUSD 互通性與驗證。
當您想將渲染、物理、感測器模擬、OpenUSD 運算或驗證整合至應用程式或服務時，請從 Omniverse 函式庫開始。當您希望 AI 代理程式調用 Omniverse 工具以處理定義的任務時，請運用代理程式技能。 當您需要參考工作流程，了解 NVIDIA 技術如何整合應用於物理 AI 開發時，請從藍圖開始。
開發人員可使用 Omniverse 說明文件、GitHub 儲存庫、範例內容，以及選定的 NVIDIA NGC 資源，用於開發、研究、測試與評估（如有）。GitHub 上的某些 Omniverse 函式庫為預發行版本，不受企業支援。 對於正式環境或企業用途，若客戶擁有適用的 NVIDIA 支援權利，則可透過 NVIDIA Enterprise Support 獲得支援。檢閱每種資源的說明文件，了解授權、支援級別與預期用途。
NVIDIA Omniverse 協助開發人員建構並模擬物理 AI 的 3D 世界、應用程式與工作流程。NVIDIA Cosmos™ 提供世界基礎模型與開放資料處理、訓練與評估框架，用於物理 AI 模型開發。 團隊可同時使用這些功能，當 Omniverse 的模擬就緒環境支援 Cosmos 驅動的物理 AI 系統的資料生成、測試或評估工作流程時。
NVIDIA Omniverse Launcher (已停止支援)
舊式 Omniverse 工具（包括 Omniverse Launcher）在支援的情況下，可透過 NVIDIA 的舊式工具與文件路徑取得。開始新專案的開發人員應使用現有 Omniverse 開發人員資源、說明文件、GitHub 儲存庫與支援工具。
如需更多詳細資料，請造訪 Omniverse 舊版工具與 NVIDIA 開發人員論壇。
NVIDIA Cosmos 是世界基礎模型 (WFM) 開發平台。該平台核心是 Cosmos WFM，可利用多模態輸入內容生成世界狀態的影片。
開發人員可將 Omniverse 模擬內容作為教學影片輸入 Cosmos Transfer WFM 模型，生成可控制的擬真合成資料。
兩者相互搭配，Omniverse 可提供訓練前和訓練後的模擬環境，而 Cosmos 則可提供擬真的可控制合成資料，供訓練物理 AI 模型使用。
後續步驟
加入 OMNIVERSE 社群
與 Omniverse 開發人員交流、分享意見反應、探索範例與學習資源，並隨時掌握 OpenUSD、模擬與物理 AI 工作流程。
開始使用 Omniverse 進行建置
探索用於物理 AI 模擬與代理式工作流程的加速程式庫、微服務與技能。
Omniverse GitHub
探索 Omniverse 儲存庫、範例與開放原始碼資源，用於使用 OpenUSD 進行建置，以及渲染、物理、感測器與驗證。