IA fisica
NVIDIA Omniverse
Crea mondi pronti per la simulazione per l'IA fisica con strumenti agent-ready per il rendering, la fisica, i sensori e la convalida.
Panoramica
Cos'è NVIDIA Omniverse?
Le librerie NVIDIA Omniverse™, parte di NVIDIA Agent Toolkit, offrono funzionalità predefinite per la creazione di mondi pronti per la simulazione che i team di IA fisica possono utilizzare per addestrare, testare e convalidare i sistemi prima della distribuzione nel mondo reale. I team di sviluppo possono integrare librerie, API e servizi per l'interoperabilità dei dati OpenUSD, il rendering, la fisica, la simulazione dei sensori, la convalida e i flussi di lavoro di runtime nelle applicazioni esistenti che possono essere usati dagli agenti IA possono come strumenti per creare questi mondi più rapidamente.
Tecnologia
Principali librerie e servizi Omniverse
Utilizza le librerie e i servizi Omniverse per aggiungere capacità di simulazione dell'IA fisica nelle applicazioni, negli strumenti e nei flussi di lavoro pronti per gli agenti.
Dati OpenUSD e interoperabilità
Connetti, organizza e scambia dati delle scene 3D nelle applicazioni e nelle pipeline di simulazione.
- Da usare: quando hai bisogno di una struttura duratura per le scene, per il trasferimento delle risorse o per l'interoperabilità delle applicazioni.
- Ruolo agent-ready: gli agenti possono ispezionare, organizzare, convertire e instradare i dati delle scene.
Rendering e simulazione RTX
Visualizza in anteprima le scene, genera output dei sensori e produci prove visive dai mondi pronti per la simulazione.
- Da usare: quando hai bisogno di pre-flight visivi, di output dei sensori sintetici o di una revisione delle scene pronte per la simulazione.
- Ruolo agent-ready: gli agenti possono attivare i rendering, simulare i sensori e restituire prove visive.
Simulazione fisica
Simula movimenti, contatti e comportamenti basati sulla fisica per la robotica e i digital twin.
- Da usare: quando è necessario testare collisioni, movimenti, dinamiche o proprietà physics-ready.
- Ruolo agent-ready: gli agenti possono eseguire controlli delle proprietà physics-ready e instradare i problemi per una revisione.
Convalida delle risorse simulation-ready
Verifica le risore OpenUSD rispetto ai requisiti SimReady prima dell'addestramento a valle, dei test o della distribuzione.
- Da usare: quando hai bisogno di gate di accettazione prima di spostare le risorse nei flussi di lavoro di simulazione nel campo dell'IA fisica.
- Ruolo agent-ready: gli agenti possono eseguire controlli di convalida e restituire prove di superamento o fallimento.
Opzioni per iniziare
Scegli come creare con Omniverse
Inizia con librerie, strumenti pronti agent-ready, blueprint o flussi di lavoro di esempio, in base a ciò che vuoi creare.
Casi d'uso
Come i team utilizzano Omniverse per l'IA fisica
-
Digital twin di impianti industriali
-
Simulazione
di robot -
Robot
Learning -
Generazione di dati sintetici
-
Simulazione di veicoli autonomi
Digital twin di impianti industriali
Prepara gli ambienti industriali per il test, l'ottimizzazione e la convalida dei flussi di lavoro di IA fisica prima della distribuzione nel mondo reale.
- Collega i dati delle scene OpenUSD nei flussi di lavoro di progettazione, ingegneria e simulazione.
- Aggiungi rendering RTX, fisica, sensori e convalida per rendere le strutture pronte per la simulazione.
- Ispeziona gli ambienti, rileva eventuali problemi e restituisci prove per la revisione con strumenti agent-ready.
Delta Electronics
Simulazione di robot
Testa il comportamento, la percezione, il movimento e l'interazione dei sensori dei robot in ambienti pronti per la simulazione prima della distribuzione.
- Prepara le scene OpenUSD con materiali, proprietà fisiche, collider, sensori e dati semantici.
- Esegui il pre-flight visivo, dei sensori e della fisica per verificare la prontezza delle scene.
- Ispeziona le scene, richiama le funzionalità di simulazione e instrada i problemi per la revisione con strumenti agent-ready.
Apprendimento robotico
Crea ambienti di simulazione basati sulla fisica per l'apprendimento dei robot, i test e l'iterazione delle policy.
- Configura mondi pronti per le attività con sensori, fisica, variazione delle scene e convalida.
- Genera scenari per l'apprendimento robotico, i test e i flussi di lavoro di valutazione delle policy.
- Controlla la prontezza delle scene e restituisci i risultati dai passaggi di simulazione.
Agility, Apptronik, Fourier Intelligence, Unitree
Generazione di dati sintetici
Genera dati sintetici basati sulla fisica da mondi pronti per la simulazione per addestrare e testare modelli di IA fisica.
- Configura la variazione delle scene, i layout dei sensori, l'illuminazione, i materiali e gli output di rendering.
- Produci dati sintetici con il rendering basato sulla fisica e la simulazione dei sensori.
- Innesca le attività di generazione dei dati, ispeziona gli output e segnala i problemi da revisionare.
Simulazione di veicoli autonomi
Prepara ambienti pronti per la simulazione per testare sistemi di percezione, sensori e scenari per veicoli autonomi.
- Organizza dati di strade, strutture e scenari con le risorse OpenUSD pronte per i sensori.
- Simula telecamere, lidar, radar e preflight visivi per i flussi di lavoro di percezione.
- Ispeziona la configurazione dei sensori e segnala eventuali problemi di prontezza prima dei test a valle.
Storie di successo
Flussi di lavoro di IA fisica nella pratica
Ecosistema
Omniverse nell'ecosistema dell'IA fisica
Scopri come partner e sviluppatori stanno collegando le capacità di Omniverse nelle applicazioni e nei flussi di lavoro per l'IA fisica, i digital twin, la robotica e la simulazione.
Risorse
Ultime novità da Omniverse
-
Ultime notizie
-
Sessioni
-
formazione
-
Demo
Domande frequenti
NVIDIA Omniverse fornisce librerie, API, servizi e strumenti agent-ready per la creazione di applicazioni di IA fisica e flussi di lavoro 3D pronti per la simulazione. Gli sviluppatori utilizzano Omniverse per integrare l'interoperabilità dei dati OpenUSD, il rendering RTX, la fisica, la simulazione dei sensori, la convalida e le capacità di runtime nelle applicazioni e nei flussi di lavoro esistenti.
Chi si occupa di sviluppo può creare applicazioni di simulazione di IA fisica, digital twin industriali, flussi di lavoro di simulazione robotica, pipeline di dati sintetici e strumenti per la preparazione di mondi 3D per la simulazione. Omniverse aiuta i team a collegare i dati 3D, a simulare sensori e fisica, a convalidare le risorse e a passare dai contenuti 3D visivi agli ambienti pronti per la simulazione.
Gli agenti IA possono utilizzare le capacità di Omniverse come strumenti all'interno di flussi di lavoro revisionabili. Un agente può ispezionare una scena 3D o lo stato di un'applicazione, chiamare gli strumenti Omniverse per le operazioni OpenUSD, il rendering, la fisica, la simulazione dei sensori o la convalida e restituire prove che gli sviluppatori o gli artisti tecnici possono esaminare prima che il flusso di lavoro vada avanti.
Sì. Le librerie e i servizi Omniverse aiutano chi sviluppa e produce software ad aggiungere capacità di simulazione negli strumenti, nei servizi e nei flussi di lavoro esistenti. Ciò consente ai team di utilizzare Omniverse per il rendering, la fisica, la simulazione dei sensori, l'interoperabilità OpenUSD e la convalida, senza che sia necessario sostituire le applicazioni differenziate già adottate o le esperienze utente già create.
Inizia a usare le librerie Omniverse per integrare i rendering, la fisica, la simulazione dei sensori, le operazioni OpenUSD o la convalida nelle tue applicazioni o nei tuoi servizi. Utilizza le competenze agentiche quando desideri che gli agenti IA richiamino gli strumenti Omniverse per lo svolgimento di attività definite. Inizia dai blueprint quando ti servono flussi di lavoro di riferimento che mostrino come le tecnologie NVIDIA si adattano l'una all'altra per lo sviluppo dell'IA fisica.
Gli sviluppatori possono utilizzare la documentazione di Omniverse, i repository GitHub, i contenuti di esempio e selezionare le risorse NVIDIA NGC per lo sviluppo, la ricerca, i test e la valutazione, ove disponibili. Alcune librerie Omniverse su GitHub sono in versione di pre-rilascio e non sono supportate dall'azienda. Per la produzione o l'uso aziendale, il supporto è disponibile tramite NVIDIA Enterprise Support se il cliente ha un diritto al supporto NVIDIA applicabile. Esamina la documentazione di ogni risorsa per verificarne la licenza, il livello di supporto e l'uso previsto.
NVIDIA Omniverse aiuta gli sviluppatori a creare e simulare mondi 3D, applicazioni e flussi di lavoro per l'IA fisica. NVIDIA Cosmos™ fornisce modelli di base del mondo e framework aperti per l'elaborazione dei dati, l'addestramento e la valutazione dello sviluppo dei modelli di IA fisica. I team possono utilizzarli insieme quando gli ambienti pronti per la simulazione da Omniverse supportano la generazione di dati, il test o i flussi di lavoro di valutazione per i sistemi di IA fisica basati su Cosmos.
NVIDIA Omniverse Launcher (obsoleto)
Gli strumenti Omniverse legacy, tra cui Omniverse Launcher, sono disponibili tramite gli strumenti legacy di NVIDIA e i percorsi di documentazione, ove supportati. Gli sviluppatori che iniziano nuovi progetti dovrebbero utilizzare le attuali risorse per sviluppatori Omniverse, la documentazione, i repository GitHub e gli strumenti supportati.
Consulta gli strumenti legacy Omniverse e i forum per sviluppatori NVIDIA per maggiori dettagli.
NVIDIA Cosmos è una piattaforma di sviluppo di modelli del mondo (WFM). Al suo centro sono presenti i Cosmos WFM che generano stati del mondo come video utilizzando input multimodali.
Gli sviluppatori possono inserire le simulazioni Omniverse come video didattici nel Cosmos Transfer WFM per generare dati sintetici controllabili e fotorealistici.
Insieme, Omniverse fornisce l'ambiente di simulazione prima e dopo l'addestramento, mentre Cosmos fornisce i dati sintetici fotoreali controllabili per addestrare modelli di IA fisica.
Prossimi passi
Entra Nella Community di Omniverse
Entra in contatto con gli sviluppatori Omniverse, condividi feedback, esplora gli esempi e le risorse di apprendimento e non perderti le ultime novità su OpenUSD, sulla simulazione e sui flussi di lavoro di IA fisica.
Inizia a creare con Omniverse
Scopri le librerie accelerate, i microservizi e le competenze per la simulazione nei campi dell'IA fisica e dei flussi di lavoro agentici.
GitHub Omniverse
Scopri i repository Omniverse, gli esempi e le risorse open source per la creazione tramite OpenUSD, rendering, fisica, sensori e convalida.