IA Física
NVIDIA Omniverse
Crie mundos prontos para simulação para IA física com ferramentas prontas para agentes para renderização, física, sensores e validação.
Visão Geral
O que é o NVIDIA Omniverse?
As bibliotecas do NVIDIA Omniverse™, parte do Kit de Ferramentas do NVIDIA Agent, fornecem recursos pré-construídos para criar mundos prontos para simulação que as equipes de IA física podem usar para treinar, testar e validar sistemas antes da implantação no mundo real. Os desenvolvedores podem integrar bibliotecas, APIs e serviços para interoperabilidade de dados do OpenUSD, renderização, física, simulação de sensores, validação e workflows em runtime em aplicações existentes, onde os agentes de IA podem usá-los como ferramentas para criar esses mundos mais rapidamente.
Tecnologia
Principais bibliotecas e serviços do Omniverse
Use as bibliotecas e serviços do Omniverse para adicionar recursos de simulação de IA física em aplicações, ferramentas e workflows prontos para agentes.
Dados e interoperabilidade do OpenUSD
Conecte, organize e troque dados de cenas 3D em aplicações e pipelines de simulação.
- Use-o quando: você precisar de estrutura durável de cena, transferência de ativos ou interoperabilidade de aplicações.
- Função pronta para agentes: os agentes podem inspecionar, organizar, converter e rotear dados de cena.
Renderização RTX e simulação
Faça a pré-visualização de cenas, gere resultados de sensores e produza evidências visuais de mundos prontos para simulação.
- Use-o quando: você precisar de verificação visual preliminar, saída de sensores sintéticos ou revisão de cenas pronta para simulação.
- Função pronta para agentes: os agentes podem acionar renderizações, simular sensores e retornar evidências visuais.
Simulação de Física
Simule movimento, contatos e comportamento fisicamente fundamentado para workflows de robótica e gêmeos digitais.
- Use-o quando: você precisar testar colisões, movimento, dinâmica ou prontidão da física.
- Papel de prontidão para agentes: os agentes podem executar verificações de prontidão física e encaminhar problemas para revisão.
Validação de ativos pronta para simulação
Verifique os ativos OpenUSD em relação aos requisitos de prontidão para simulação antes do treinamento, teste ou implantação downstream.
- Use-o quando: você precisr de portões de aceitação antes de mover ativos para workflows de simulação de IA física.
- Função pronta para agentes: os agentes podem executar verificações de validação e retornar evidências de aprovação/reprovação.
Opções de Início
Escolha como criar com o Omniverse
Comece com bibliotecas, ferramentas prontas para agentes, blueprints ou workflows de amostra, com base no que você quer criar.
Casos de Uso
Como as equipes usam o Omniverse para IA física
-
Gêmeos Digitais de Instalações Industriais
-
Simulação
de robôs -
Aprendizagem
de Robôs -
Geração de Dados Sintéticos
-
Simulação de Veículos Autônomos
Gêmeos Digitais de Instalações Industriais
Prepare ambientes industriais para testar, otimizar e validar workflows de IA física antes da implantação no mundo real.
- Conecte os dados de cena do OpenUSD em workflows de design, engenharia e simulação.
- Adicione renderização RTX, física, sensores e validação para tornar as instalações prontas para simulação.
- Inspecione ambientes, detecte problemas e retorne evidências para revisão com ferramentas prontas para agentes.
Delta Electronics
Simulação de robôs
Teste o comportamento, a percepção, o movimento e a interação de sensores dos robôs em ambientes prontos para simulação antes da implantação.
- Prepare cenas OpenUSD com materiais, propriedades físicas, colisores, sensores e dados semânticos.
- Execute a verificação visual preliminar, de sensores e física para verificar a prontidão da cena.
- Inspecione cenas, invoque recursos de simulação e encaminhe problemas para revisão com ferramentas prontas para agentes.
Aprendizagem de Robôs
Crie ambientes de simulação fisicamente fundamentados para aprendizagem de robôs, testes e iteração de políticas.
- Configure mundos prontos para tarefas com sensores, física, variação de cenas e validação.
- Gere cenários para workflows de aprendizagem de robôs, testes e avaliação de políticas.
- Verifique a prontidão da cena e retorne evidências das etapas de simulação.
Agility, Apptronik, Fourier Intelligence, Unitree
Geração de Dados Sintéticos
Gere dados sintéticos baseados fisicamente em mundos prontos para simulação para treinar e testar modelos de IA física.
- Configure a variação da cena, layouts de sensores, iluminação, materiais e saídas de renderização.
- Produza dados sintéticos com renderização baseada em física e simulação de sensores.
- Ative tarefas de geração de dados, inspecione saídas e sinalize problemas para revisão.
Simulação de Veículos Autônomos
Prepare ambientes prontos para simulação para testar sistemas de percepção, sensores e cenários de veículos autônomos.
- Estruture dados de estradas, instalações e cenários com ativos OpenUSD prontos para sensores.
- Simule câmeras, lidar, radar e verificação visual preliminar para workflows de percepção.
- Inspecione a configuração dos sensores e sinalize problemas de prontidão antes de realizar testes posteriores.
Histórias de sucesso
Workflows de IA física na prática
Ecossistema
Omniverse em todo o ecossistema de IA física
Veja como parceiros e desenvolvedores estão conectando os recursos do Omniverse a aplicações e workflows para IA física, gêmeos digitais, robótica e simulação.
Recursos
Novidades do Omniverse
-
Últimas Novidades
-
Sessões
-
Aprendizagem
-
Demonstrações
Perguntas Frequentes
O NVIDIA Omniverse fornece bibliotecas, APIs, serviços e ferramentas prontas para agentes para criar aplicações de IA física e workflows 3D prontos para simulação. Os desenvolvedores usam o Omniverse para integrar a interoperabilidade de dados do OpenUSD, renderização RTX, física, simulação de sensores, validação e recursos de runtime em aplicações e workflows existentes.
Os desenvolvedores podem criar aplicações de simulação de IA física, gêmeos digitais industriais, workflows de simulação de robótica, pipelines de dados sintéticos e ferramentas para preparar mundos 3D para simulação. O Omniverse ajuda as equipes a conectar dados 3D, simular sensores e física, validar ativos e passar do conteúdo visual 3D para ambientes prontos para simulação.
Os agentes de IA podem usar os recursos do Omniverse como ferramentas em workflows revisáveis. Um agente pode inspecionar uma cena 3D ou o estado de uma aplicação, chamar as ferramentas do Omniverse para operações do OpenUSD, renderização, física, simulação de sensores ou validação e retornar evidências para um desenvolvedor ou artista técnico revisar antes que o Workflow prossiga.
Sim. As bibliotecas e serviços do Omniverse ajudam desenvolvedores e fabricantes de software a adicionar recursos de simulação às ferramentas, serviços e workflows existentes. Isso permite que as equipes usem o Omniverse para renderização, física, simulação de sensores, interoperabilidade do OpenUSD e validação sem substituir suas aplicações diferenciadas ou experiências de usuário.
Comece com as bibliotecas do Omniverse quando quiser integrar renderização, física, simulação de sensores, operações do OpenUSD ou validação em uma aplicação ou serviço. Use habilidades de agentes quando quiser que agentes de IA chamem ferramentas do Omniverse para tarefas definidas. Comece com blueprints quando quiser workflows de referência que mostrem como as tecnologias da NVIDIA se encaixam para o desenvolvimento de IA física.
Os desenvolvedores podem usar a documentação do Omniverse, repositórios do GitHub, amostras de conteúdo e recursos selecionados do NVIDIA NGC para desenvolvimento, pesquisa, testes e avaliação, quando disponíveis. Algumas bibliotecas do Omniverse no GitHub são de pré-lançamento e não possuem suporte empresarial. Para produção ou uso empresarial, o suporte está disponível por meio do NVIDIA Enterprise Support quando um cliente tem um direito de suporte aplicável da NVIDIA. Revise a documentação de cada recurso para verificar sua licença, nível de suporte e uso pretendido.
O NVIDIA Omniverse ajuda os desenvolvedores a criar e simular mundos 3D, aplicações e workflows para IA física. O NVIDIA Cosmos™ fornece world foundation models e processamento aberto de dados, treinamento e frameworks de avaliação para o desenvolvimento de modelos de IA física. As equipes podem usá-los juntos quando os ambientes prontos para simulação do Omniverse oferecem suporte a workflows de geração de dados, teste ou avaliação para sistemas de IA física com tecnologia Cosmos.
NVIDIA Omniverse Launcher (Descontinuado)
As ferramentas legadas do Omniverse, incluindo o Omniverse Launcher, estão disponíveis por meio das ferramentas legadas e dos caminhos de documentação da NVIDIA, onde houver suporte. Os desenvolvedores que iniciam novos projetos devem usar os recursos atuais de desenvolvedor do Omniverse, a documentação, os repositórios do GitHub e as ferramentas compatíveis.
Acesse as ferramentas legadas do Omniverse e os fóruns de desenvolvedor da NVIDIA para mais detalhes.
O NVIDIA Cosmos é uma plataforma de desenvolvimento de world model (WFM). Em seu núcleo estão os Cosmos WFMs que geram estados de mundo como vídeos usando entrada multimodal.
Os desenvolvedores podem inserir simulações do Omniverse como vídeos instrucionais no Cosmos Transfer WFM para gerar dados sintéticos controláveis e fotorrealistas.
Juntas, a Omniverse fornece o ambiente de simulação antes e depois do treinamento, enquanto a Cosmos fornece dados sintéticos fotorrealistas controláveis para treinar modelos de IA físicos.
Próximos Passos
Participe da comunidade Omniverse
Conecte-se com os desenvolvedores do Omniverse, compartilhe feedback, explore amostras e recursos de aprendizagem e permaneça atualizado sobre o OpenUSD, a simulação e os workflows de IA física.
Comece a criar com o Omniverse
Explore bibliotecas aceleradas, microsserviços e habilidades para simulação de IA física e workflows baseados em agentes.
Omniverse GitHub
Explore os repositórios do Omniverse, exemplos e recursos de código aberto para criar com OpenUSD, renderização, física, sensores e validação.