自駕車模擬

探索高擬真、多元的感應器模擬,開發安全的自駕車。

工作負載‎‎

模擬 / 建模 / 設計

產業別

汽車與交通

業務目標

投資報酬率
風險減輕策略

產品

NVIDIA Omniverse Enterprise
NVIDIA OVX
NVIDIA DGX

概覽

高擬真自駕車模擬需求

開發自駕車 (AV) 需要大量訓練資料,反映車輛上路後實際面臨的情況。感測器模擬會在虛擬環境渲染實際的感應器資料,解決自駕車上路面臨的難題。世界基礎模型以這些物理原則為準,增加感應器模擬的變異,並增強光、天氣、地理位置等變化。利用這些功能,您不必在現實世界經歷罕見且危險的場景,即可大規模訓練、測試和驗證自駕車。感測器資料與環境互動的精確度是開發實體 AI 的關鍵。

自駕車模擬技術重要的理由:

安全

渲染惡劣天氣、車流變化等各種行車狀況,不必在現實世界經歷罕見、危險的場景。

成本效益

透過生成資料滿足模型需求,加速開發並降低對高成本資料收集車隊的依賴。

擴充性和靈活性

在製作實體原型之前部署虛擬車隊,為新的感測器和堆疊建立原型。

利用神經重建和世界模型,加速自駕車模擬

在這篇技術部落格文章中,我們摘要最新的 NVIDIA API、NVIDIA Cosmos™ 世界基礎模型 (WFM) 和 NVIDIA NIM™ 微服務,協助開發人員推動資料流程。

快速連結:


技術實作過程

大規模執行符合物理定律的精確自駕車模擬

開發人員採取以下步驟即可開始建置自駕車模擬管線。

透過數位孿生重現真實世界資料,突顯 CARLA 中的資料變異

NVIDIA Omniverse™ NuRec 提供神經重建與渲染的 API 和工具,讓開發人員能將感測器資料化為高擬真度 3D 數位孿生、模擬新事件,並從全新角度渲染資料集。

Cosmos Transfer 以真實資料與結構化資料輸入為基礎,生成全新的光線、天氣與地形,將單一駕駛情境化為成千上百種情境。開發人員可使用提示與感測器資料作為輸入內容,為現有場景生成不同變化版本。

NuRec 與 Cosmos Transfer 皆整合頂尖的開源自駕車模擬器 CARLA。平台整合方便開發人員使用光線追蹤,透過高斯重現技術生成感測器資料,再利用 Cosmos WFM 豐富場景。

開發人員可利用這些工具:

  • 在重建場景模擬全新軌跡與攝影機視圖
  • 使用 CARLA 的 API 與交通模型,打造各式各樣逼真的情境
  • 利用 ITRA 和 Foretellix 等行為代理模型,實現先進的交通與行為多樣性

這項整合包含預先重建場景的入門套件,可快速建立開發自駕車所需的極端案例資料集。

使用 NVIDIA Cosmos 加速模擬

開發人員可使用最新的 NVIDIA Cosmos 資料處理工作流程和世界基礎模型,及快速、可擴充的合成資料生成輔助自駕車開發。使用 Cosmos Curator 篩選、注解、刪除大量重複的資料集,並使用 Cosmos Dataset Search 快速建立自訂的訓練後期資料集。Cosmos Predict 和 Cosmos Transfer WFM 生成新的影片資料,可供測試和驗證使用,也可延伸運用於天氣、照明和地形條件。


合作夥伴

開始使用自駕車模擬

瞭解我們的合作夥伴如何推出符合物理原則的模擬,開發安全、高效的自駕車。

透過連結 Foretellix 的 Foretify™ 覆蓋率驅動驗證平台,快速擴展 Omniverse Cloud 自駕車模擬驗證及確認 (verification and validation, V&V) 功能。

請參閱業界部署最新自駕車安全框架。

善用相容模擬就緒內容的共用生態系統。

透過 MathWorks RoadRunner 將環境資料快速匯入 Omniverse Cloud。


常見問答集

登記表單以獲得最新資訊。

最新消息

NVIDIA 宣布 Omniverse Sensor RTX 開放搶先體驗

閱讀 Accenture 和 Foretellix 如何利用高擬真、可擴充的感應器模擬技術,加速開發新一代自駕車和機器人。

NVIDIA 推出 Cosmos 世界基礎模型平台,加速開發實體人工智慧

公司可透過影像與影片模型及資料處理流程,加速開發機器人與自駕車等實體人工智慧。

NVIDIA 使用 Omniverse Cloud API 來強化自動系統開發

NVIDIA Omniverse Cloud API 專門提供大規模、高擬真感應器模擬。

NVIDIA 研究在國際電腦視覺與圖型識別會議 (CVPR) 上的端對端自動駕駛挑戰賽中榮獲優勝

NVIDIA 在 CVPR「大規模端對端駕駛」組中擊敗全球 400 多位參賽者,榮獲自動駕駛挑戰賽優勝。

使用案例與示範

Foretellix

採用 NVIDIA Omniverse 平台的自駕車感測器模擬

瞭解 Foretellix 如何利用自駕車模擬用的 NVIDIA Omniverse Blueprint,為開發自駕車生成高擬真感測器模擬。

Foretellix

安全部署自駕車

Foretellix 是一家自動車驗證工具開發商,採用 Omniverse Cloud API 解鎖感測器模擬技術,不僅能提升安全性,同時還可加速工作流程並降低成本。

WPP

強化 3D 品牌體驗

使用根據 NVIDIA Picasso 而打造的生成式人工智慧工具來製作高品質內容,並運用 NVIDIA 繪圖運算傳遞網路 (Graphics Delivery Network, GDN)來發佈互動式品牌體驗。

探索端對端自駕車開發

NVIDIA Omniverse Cloud Sensor RTX 微服務,提供你符合物理原則的環境測試和驗證工作流程,再投入現實環境測試。