Physische KI
NVIDIA Omniverse
Entwickeln Sie simulationsfähige Welten für physische KI, indem Sie modulare, agentenfähige Bibliotheken in bestehende 3D-Anwendungen und Workflows integrieren.
Überblick
Was ist NVIDIA Omniverse?
Physische KI-Systeme benötigen simulationsfähige Welten für Design, Training, Testen und Validierung vor der realen Bereitstellung. Aber eine 3D-Szene kann vollständig aussehen und es fehlen noch die Struktur und die physischen Eigenschaften, die für die Simulation erforderlich sind.
NVIDIA Omniverse-Bibliotheken, Teil des NVIDIA Agent Toolkit, sind modulare Softwarekomponenten, die Entwickler und KI-Agenten in bestehende Anwendungen und Workflows integrieren können, um simulationsreife Welten vorzubereiten und zu validieren. Frontier-KI-Agenten können diese nutzen, um 3D-Inhalte vorzubereiten, Simulations-Workflows zusammenzustellen, zu testen und Probleme für die Überprüfung durch Entwickler zu melden. Dies ermöglicht es Softwareherstellern, ihre vertrauenswürdigen Solver, Simulatoren, Tools und Daten Agenten zur Verfügung zu stellen, während sie die Kontrolle über ihre Anwendungen, Workflows und das Kundenerlebnis behalten.
Technologie
Kernbibliotheken und Dienste von Omniverse
Verbinden und strukturieren Sie 3D-Daten
Nutzen Sie OpenUSD, um native Anwendungsdaten in strukturierte 3D-Szenen abzubilden, die sich über Anwendungen und Simulationspipelines hinweg bewegen. Entdecken Sie Python- und C++-Beispiele für die Erstellung und den Austausch von USD-Daten.
Überprüfen Sie die Asset-Bereitschaft
Nutzen Sie SimReady, um OpenUSD-Assets gegen die Anforderungen an die Simulationsreife zu überprüfen, bevor Sie das nachgelagerte Training, das Testen oder die Bereitstellung durchführen. Überprüfen Sie, welche Anforderungen bestehen oder scheitern, und identifizieren Sie Asset-Eigenschaften, die Aufmerksamkeit erfordern.
Rendern Sie 3D-Welten für die Simulation
Nutzen Sie ovrtx, um NVIDIA RTX Rendering und Sensorsimulation in bestehende Anwendungen zu bringen. Erstellen Sie interaktive Visualisierungen und generieren Sie Kamera-, Lidar-, Radar- und andere Sensorausgaben aus OpenUSD-Szenen.
Simulieren Sie physisches Verhalten
Nutzen Sie ovphysx, um GPU-beschleunigte Physik in bestehende Anwendungen zu bringen. Simulieren Sie Bewegungen, Kontakte und Kollisionen für Robotik- und Digital-Twin-Workflows mit Python- und C/C++-Beispielen für den Einstieg.
Einstiegsoptionen
Erste Schritte mit Omniverse
Anwendungsfälle
Wie Teams Omniverse für physische KI nutzen
-
Digital Twins für KI-
Fabriken -
Digital Twins für
Industrieanlagen -
Robotersimulation
und Lernen -
Simulationsfähige
3D-Daten -
Generierung synthetischer
Daten -
Simulation autonomer
Fahrzeuge
Digital Twins für KI-Fabriken
Optimieren Sie die Leistung von KI-Fabriken – vom Design und dem Bau bis hin zum Betrieb.
Verbinden Sie Rechenleistung, Netzwerke, Energie und Kühlung in einem Digital Twin, um die Leistung von KI-Fabriken vor dem Bau zu testen und während des gesamten Betriebs zu optimieren.
- Verbinden Sie Anlagen- und Ausrüstungsdaten mit OpenUSD- und SimReady-Assets.
- Optimieren Sie Layouts, Energie und Kühlung mit dem NVIDIA Omniverse DSX Blueprint.
- Testen Sie Design- und Betriebsänderungen in der Simulation vor der Implementierung.
Industrielle digitale Zwillinge
Erstellen Sie simulationsreife Digital Twins von Industrieanlagen, um den Betrieb zu testen und zu optimieren.
Bereiten Sie industrielle Umgebungen vor, um vor der realen Bereitstellung physische KI-Workflows zu testen, zu optimieren und zu validieren.
- Verbinden Sie OpenUSD-Szenendaten in Design-, Engineering- und Simulations-Workflows.
- Fügen Sie RTX-Rendering, Physik, Sensoren und Validierung hinzu, um Einrichtungen simulationsbereit zu machen.
- Inspizieren Sie Umgebungen, zeigen Sie Probleme auf und geben Sie Beweise für die Überprüfung mit agentenfähigen Tools zurück.
KION
Robotersimulation und Lernen
Trainieren Sie Steuerungsregeln für Roboter und testen Sie das Verhalten in der Simulation vor der Bereitstellung in der realen Welt.
Bringen Sie Physik, Sensorsimulation und OpenUSD mit Omniverse-Bibliotheken in die Test- und Lernworkflows der Robotik ein.
- Bereiten Sie OpenUSD-Szenen mit Materialien, Physikeigenschaften, Sensoren und semantischen Daten vor.
- Testen Sie die Wahrnehmung, die Bewegung und die Interaktionen des Roboters mit Physik und Sensorsimulation.
- Erstellen Sie unterschiedliche Aufgaben und Umgebungen, um Steuerungsregeln für Roboter zu trainieren und zu bewerten.
Simulationsfähige 3D-Daten
Erstellen und validieren Sie 3D-Assets, um Simulationswelten für physische KI zu entwickeln.
Erstellen Sie physisch genaue Assets, die 3D-Entwickler und KI-Agenten nutzen können, um simulationsfähige Welten zu erstellen.
- Konvertieren Sie bestehende 3D-Inhalte in OpenUSD-Assets für Simulations-Workflows.
- Fügen Sie Physikeigenschaften, Materialien und semantische Labels hinzu, die für den vorgesehenen Anwendungsfall erforderlich sind.
- Validieren Sie Assets anhand der SimReady-Anforderungen und verwenden Sie Inhalte über unterstützte Tools und Laufzeiten hinweg wieder.
Generierung synthetischer Daten
Generieren Sie physikalisch fundierte Sensordaten, um physische KI-Modelle zu trainieren und zu testen.
Generieren Sie physikalisch verankerte synthetische Daten aus simulationsfähigen Welten, um physische KI-Modelle zu trainieren und zu testen.
- Konfigurieren Sie Szenenvariation, Sensor-Layouts, Beleuchtung, Materialien und Rendering-Ausgaben.
- Produzieren Sie synthetische Daten mit physikalisch basiertem Rendering und Sensorsimulation.
- Lösen Sie Aufgaben zur Datengenerierung aus, inspizieren Sie die Ausgaben und markieren Sie Probleme zur Überprüfung.
Simulation autonomer Fahrzeuge
Erstellen Sie virtuelle Fahrumgebungen, um die Wahrnehmung autonomer Fahrzeuge und die Sensorantworten zu testen.
Bereiten Sie simulationsfähige Umgebungen für das Testen von Wahrnehmungssystemen, Sensoren und Szenarien für autonome Fahrzeuge vor.
- Strukturieren Sie Straßen-, Anlagen- und Szenariodaten mit sensorfähigen OpenUSD-Assets.
- Simulieren Sie Kameras, Lidar, Radar und Visual Preflight für Wahrnehmungs-Workflows.
- Überprüfen Sie die Sensoreinrichtung und melden Sie Probleme mit der Bereitschaft, bevor Sie nachgelagerte Tests durchführen.
Erfolgsgeschichten
Workflows für physische KI in der Praxis
Ökosystem
Omniverse im gesamten Ökosystem der physischen KI
Erfahren Sie, wie Partner und Entwickler Omniverse-Funktionen in Anwendungen und Workflows für physische KI, digitale Zwillinge, Robotik und Simulation integrieren.
Ressourcen
Neuheiten von Omniverse
Häufig gestellte Fragen
NVIDIA Omniverse bietet Bibliotheken, APIs, Dienste und agentenfähige Tools für die Entwicklung physischer KI-Anwendungen und simulationsfähiger 3D-Workflows. Entwickler nutzen Omniverse, um OpenUSD-Dateninteroperabilität, RTX-Rendering, Physik, Sensorsimulation, Validierung und Laufzeitfunktionen in bestehende Anwendungen und Workflows zu integrieren.
Entwickler können Anwendungen für physische KI-Simulation, industrielle digitale Zwillinge, Robotiksimulations-Workflows, synthetische Datenpipelines und Tools für die Vorbereitung von 3D-Welten für die Simulation entwickeln. Omniverse hilft Teams dabei, 3D-Daten zu verbinden, Sensoren und Physik zu simulieren, Assets zu validieren und von visuellen 3D-Inhalten zu simulationsfähigen Umgebungen zu wechseln.
Frontier-KI-Agenten – wie diejenigen, die von OpenAI GPT-6 Astra unterstützt werden – können zu einem Einstiegspunkt zu NVIDIA Omniverse-Bibliotheken werden und sie als aufrufbare Tools und Fähigkeiten nutzen, um 3D-Inhalte zu erstellen und vorzubereiten, Simulations-Workflows zusammenzustellen, Experimente auszuführen und Ergebnisse zu validieren. ISVs können diese Funktionen in bestehende Anwendungen integrieren, Agenten in ihre Produkte einbauen oder vertrauenswürdige Solver, Simulatoren, Tools und Daten bereitstellen, die von Agenten aufgerufen werden können – während sie die Kontrolle über das Kundenerlebnis, die Workflows und wichtige Entscheidungen behalten.
Ja. Omniverse-Bibliotheken und -Dienste helfen Entwicklern und Softwareherstellern dabei, Simulationsfunktionen in bestehende Tools, Dienste und Workflows einzubinden. Dadurch können Teams Omniverse für Rendering, Physik, Sensorsimulation, OpenUSD-Interoperabilität und Validierung nutzen, ohne ihre differenzierten Anwendungen oder Benutzererlebnisse zu ersetzen.
Beginnen Sie mit Omniverse-Bibliotheken, wenn Sie Rendering, Physik, Sensorsimulation, OpenUSD-Operationen oder Validierung in eine Anwendung oder einen Dienst integrieren möchten. Nutzen Sie Agenten-Fähigkeiten, wenn Sie möchten, dass KI-Agenten Omniverse-Tools für definierte Aufgaben aufrufen. Beginnen Sie mit Blueprints, wenn Sie Referenz-Workflows benötigen, die zeigen, wie NVIDIA-Technologien für die Entwicklung physischer KI zusammenpassen.
Seit Mai 2026 ist Omniverse sowohl für die Entwicklungs- als auch für die Produktionsnutzung kostenlos verfügbar, ohne dass ein NVIDIA AI Enterprise-Abonnement erforderlich ist. Software, die mit Omniverse entwickelt wurde, kann auch unter den gleichen Bedingungen kostenlos weitergegeben werden. Dies entspricht dem etablierten Ansatz von NVIDIA, andere Bibliotheken kostenlos anzubieten.
Die Nutzung der gesamten Omniverse-Software unterliegt der NVIDIA-Endbenutzerlizenzvereinbarung (EULA) und den produktspezifischen Bedingungen.
Wenn Omniverse ohne ein NVIDIA AI Enterprise-Abonnement integriert ist, ist der Support auf den Community-Support über das NVIDIA-Entwicklerforum und Discord beschränkt.
Ein NVIDIA AI Enterprise-Abonnement kann von einem NPN-Wiederverkäufer oder einem Cloud-Service-Provider (CSP) Marketplace für Kunden erworben werden, die Unternehmenssupport benötigen.
NVIDIA Cosmos bietet offene World-Foundation-Modelle und Frameworks, die physischen KI-Systemen dabei helfen, Schlussfolgerungen zu ziehen, Weltzustände zu generieren und Handlungen zu lernen. Omniverse bietet die Simulationstechnologien, die Entwickler nutzen, um strukturierte 3D-Umgebungen zu entwickeln, zu rendern und zu testen.
Entwickler können sie zusammen nutzen, indem sie die Ausgaben von Omniverse-Simulationen in Cosmos-Modelle einspeisen.
Nächste Schritte
WERDEN SIE MITGLIED DER OMNIVERSE-COMMUNITY
Tauschen Sie sich mit Omniverse-Entwicklern aus, teilen Sie Feedback, entdecken Sie Beispiele und Lernressourcen und bleiben Sie auf dem Laufenden über OpenUSD, Simulation und physische KI-Workflows.
Entwickeln Sie mit Omniverse
Entdecken Sie beschleunigte Bibliotheken, Microservices und Fähigkeiten für physische KI-Simulation und agentische Workflows.
Omniverse GitHub
Entdecken Sie Omniverse-Repositorys, Beispiele und Open-Source-Ressourcen für die Entwicklung mit OpenUSD, Rendering, Physik, Sensoren und Validierung.