As tecnologias de humano digitais da NVIDIA dão vida aos personagens de jogos com IA

Na GDC 2024 e na GTC 2024, anunciamos que os principais desenvolvedores de IA em uma ampla gama de setores estão usando tecnologias dos humanos digitais da NVIDIA para criar avatares realistas para aplicações comerciais e personagens de jogos dinâmicos.

O conjunto de tecnologias de humanos digitais da NVIDIA inclui NVIDIA Avatar Cloud Engine (ACE) para fala e animação, NVIDIA NeMo para linguagem e NVIDIA RTX para renderização com ray tracing, permitindo que os desenvolvedores criem humanos digitais capazes de interações de linguagem natural alimentadas por IA, conversando de um jeito mais realista e dinâmico. 

Os usuários experimentam as tecnologias NVIDIA ACE através de criações de desenvolvedores possibilitadas por nossos parceiros de plataformas humanas digitais. Nas feiras, desenvolvedores e parceiros de plataforma revelaram novas demonstrações de tecnologia humana digital aproveitando diversas tecnologias de IA da NVIDIA e microsserviços NVIDIA ACE. Continue lendo para saber como Hippocratic AI, Inworld AI, Perfect World Games, RealityArts Studio e UneeQ estão aproveitando as tecnologias NVIDIA ACE, NVIDIA NeMo e NVIDIA RTX em seus jogos, plataformas e aplicações.

Inworld AI and NVIDIA colaboram em nova demonstração técnica do Covert Protocol 

Na GDC 2024, a Inworld e a NVIDIA colaboraram em uma nova demonstração de tecnologia chamada Covert Protocol para mostrar as tecnologias NVIDIA ACE e o Inworld Engine. Na demonstração técnica do Covert Protocol, você atua como um detetive particular que completa objetivos com base no resultado das conversas com os personagens da cena. O Covert Protocol desbloqueia a mecânica do jogo de simulação social com AI Digital Humans atuando como guardiões de informações cruciais, apresentando desafios e catalisando desenvolvimentos narrativos importantes. Os humanos digitais desempenham um papel crítico na experiência.

Equipado com o Inworld Engine e aproveitando o NVIDIA ACE, a jornada de cada jogador pelo Covert Protocol é única. As decisões em tempo real e o planejamento estratégico dos jogadores levam a resultados de jogo diferentes, garantindo que não haja duas jogadas iguais. Este nível de interatividade e agência do jogador impulsionado pela IA abre novas possibilidades para uma jogabilidade emergente, onde os jogadores devem pensar por si mesmos e adaptar suas estratégias em tempo real para navegar pelas complexidades do mundo do jogo.

Construído no Unreal Engine 5, o Covert Protocol aproveita o SDK da Inworld para tornar a integração com MetaHuman rápida e simples e incorpora tecnologias NVIDIA ACE, incluindo NVIDIA Riva Automatic Speech Recognition (ASR) e NVIDIA Audio2Face (A2F) para aumentar os pipelines de fala e animação da Inworld.

“A combinação dos microsserviços NVIDIA ACE e do Inworld Engine permite que os desenvolvedores criem personagens digitais que podem conduzir narrativas dinâmicas, abrindo novas possibilidades de como os jogadores podem decifrar, deduzir e jogar.” disse Kylan Gibbs, CEO da Inworld AI.

Para acelerar a adoção pelos desenvolvedores, a Inworld lançará o código-fonte do Covert Protocol em um futuro próximo, permitindo que os desenvolvedores aprendam com a demonstração tecnológica e usem-no para criar suas próprias inovações.

World of Jade Dynasty & Unawake também estão incorporando o Audio2Face no pipeline de desenvolvimento 

World of Jade Dynasty da Perfect World Games é o próximo jogo de RPG online multiplayer massivo do Unreal Engine 5 e uma sequência do incrivelmente popular Jade Dynasty da empresa.

Um novo vídeo capturado no jogo demonstra a tecnologia NVIDIA Audio2Face renderizada offline que gera sincronização labial precisa em chinês e inglês, permitindo que os roteiristas adicionem facilmente novo conteúdo de voz ao World of Jade Dynasty. O Audio2Face pode ser usado para suportar facilmente versões do jogo em vários idiomas.

Em RealityArts Studio e Unawake, movido pelo Unreal Engine 5 da Toplitz Productions, você decide o destino da humanidade em meio ao tumulto de guerras impiedosas entre criaturas de pesadelo do Céu e do Inferno. Aplique punição ou absolvição aos seus oponentes nesta aventura de ação enquanto você os enfrenta em intensas escaramuças corpo a corpo em primeira pessoa. Você é o último bastião.

Unawake aproveitou o Audio2Face para criar as animações faciais dos personagens durante o jogo e em cinemáticas de alta fidelidade. Assista ao novo vídeo Unawake abaixo para ver o Audio2Face em ação e fique ligado no lançamento do jogo ainda este ano, também apresentando DLSS 3 com Frame Generation.

Tecnologias NVIDIA ACE: blocos de construção para humanos digitais e assistentes virtuais com Hippocratic AI e UneeQ

Para mostrar os novos recursos das tecnologias dos humanos digitais da NVIDIA, trabalhamos com empresas líderes, incluindo Hippocratic AI e UneeQ, em uma série de demonstrações de novas tecnologias.

A HippocraticAI criou um agente de saúde com foco na segurança, com tecnologia LLM e específico para tarefas. O agente liga para os pacientes, acompanha as tarefas de coordenação do cuidado, dá instruções pré-operatórias, realiza o gerenciamento pós-alta e muito mais. Para o GTC, a NVIDIA colaborou com a HippocraticAI para estender sua solução para usar microsserviços NVIDIA ACE, NVIDIA Audio2Face junto com NVIDIA Animation graph e NVIDIA Omniverse Streamer Client para mostrar o potencial de um avatar de agente de saúde de IA generativo.

“Nossos assistentes digitais fornecem informações úteis, oportunas e precisas para pacientes em todo o mundo”, disse Munjal Shah, cofundador e CEO da Hippocratic AI. “As tecnologias NVIDIA ACE dão vida a eles com recursos visuais de ponta e animações realistas que ajudam a conectar-se melhor com os pacientes.”

UneeQ é uma plataforma de humanos digitais autônomos especializada na criação de avatares baseados em IA para atendimento ao cliente e aplicativos interativos. Os humanos digitais da UneeQ representam marcas online, comunicando-se com os clientes em tempo real para lhes dar confiança nas suas compras. A UneeQ integrou o microsserviço NVIDIA Audio2Face em sua plataforma e combinou-o com Synanim ML para criar avatares altamente realistas para uma melhor experiência e envolvimento do cliente. 

“A UneeQ combina IA de animação NVIDIA com nossa própria tecnologia de animação sintética Synanim ML para fornecer interações humanas digitais em tempo real que são emocionalmente responsivas e proporcionam experiências dinâmicas alimentadas por IA conversacional”, disse Danny Tomsett, CEO e fundador da UneeQ.

A NVIDIA está na vanguarda da IA ​​generativa, e os desenvolvedores e plataformas que adotam o NVIDIA ACE incluem: Convai, Cyber Agent, Data Monsters, Deloitte, HippocraticAI, IGOODI, Inworld AI, Media.Monks, miHoYo, NetEase Games, Perfect World, Openstream, OurPalm, Quantiphi, Rakuten Securities, Slalom, SoftServe, Tencent, Top Health Tech, Ubisoft, UneeQ e Unions Avatars. Acesse seus sites para descobrir como eles estão aproveitando a tecnologia humana digital para criar novas possibilidades e aprimorar as experiências dos clientes.

NVIDIA ACE: Dê Vida Aos Personagens Digitais 

Os principais desenvolvedores de humanos digitais e de jogos são pioneiros em maneiras pelas quais as tecnologias ACE e IA generativa podem ser usadas para transformar as interações entre jogadores e NPCs em jogos e aplicativos. Saiba mais sobre o NVIDIA ACE, desenvolvimentos futuros e programas de acesso antecipado. E descubra mais usos da tecnologia NVIDIA RTX e das GPUs GeForce RTX nos jogos mais recentes acessando GeForce.com.