NVIDIA Omniverse Audio2Face

BETA

Omniverse Audio2Face

Genere rápida y fácilmente animaciones faciales expresivas a partir de una fuente de audio con la tecnología Deep Learning AI de NVIDIA.

Animación facial simplificada

Omniverse Audio2Face beta simplifica la animación de un personaje 3D para que coincida con cualquier pista de voz en off, tanto si estás animando personajes para un juego, película, asistentes digitales en tiempo real como si es simplemente por diversión. Puedes usar la aplicación para aplicaciones interactivas en tiempo real o como una herramienta de creación de animación facial tradicional. Ejecuta los resultados en directo o prepáralos fuera, tú eliges.

Cómo funciona

Audio2Face está precargado con "Digital Mark", un modelo de personaje 3D que se puede animar con tu pista de audio, por lo que comenzar es simple: solo tienes que seleccionar tu audio y cargarlo. La entrada de audio se incorpora a una red neuronal profunda previamente entrenada y la salida impulsa los vértices 3D de la malla del personaje para crear la animación facial en tiempo real. También tienes la opción de editar varios parámetros de postprocesamiento para editar el rendimiento de tu personaje. Los resultados que ves en esta página son en su mayoría salidas sin procesar de Audio2Face con pocos o ningún parámetro de postprocesamiento editado.

Aplicación Omniverse Audio2Face
 
Audio2Face genera animación facial a través de la entrada de audio.

ENTRADA DE AUDIO

Utiliza una grabación o anima en directo

Solo tienes que grabar una pista de audio por voz, introducirla en la aplicación y ver cómo tu cara 3D cobra vida. Incluso puedes generar animaciones faciales en directo usando un micrófono.

Audio2Face podrá procesar cualquier idioma fácilmente. Estamos actualizándolo continuamente para incluir cada vez más idiomas.  

TRANSFERENCIA DE PERSONAJES

Intercambio de caras en un instante

Audio2Face te permite utilizar cualquier cara humana o similar en 3D, ya sea realista o estilizada. Mira esta prueba en la que reconvertimos de Digital Mark a un rinoceronte.

 
Anima cualquier cara de personaje con Audio2Face
 
Utiliza varias instancias para generar animación facial para más de un personaje.

ESCALADO DE RESULTADOS

Exprésate a ti mismo o a todos a la vez

Es fácil ejecutar varias instancias de Audio2Face con tantos personajes en escena como quieras, todos animados a partir de la misma pista de audio o con pistas diferentes. Da vida y sonido en un diálogo entre un dueto, una actuación a capella de un trío, un cuarteto sincronizado y mucho más. Además, puedes marcar hacia arriba o hacia abajo el nivel de expresión facial en cada cara y producir lotes de varios archivos de animación a partir de distintas fuentes de audio.

CONVERSIÓN DE DATOS

Conectar y convertir

La última actualización de Omniverse Audio2Face ahora permite la conversión de blendshape y las opciones de exportación de blendweight. Además, la aplicación también admite la exportación e importación con Epic Games Unreal Engine 4 para generar movimiento en los personajes de MetaHuman utilizando el Omniverse Connector de Unreal Engine 4.

 
Añade emociones a la animación.
Añade emociones a la animación.

CONTROL DE EMOCIONES

Añádele emoción

Audio2Face te da la capacidad de elegir y animar las emociones de tu personaje en un abrir y cerrar de ojos. La red de IA manipula automáticamente el movimiento de la cara, los ojos, la boca, la lengua y la cabeza para que coincida con el rango emocional seleccionado y con los grados de intensidad personalizados, o bien infiere de forma automática las emociones directamente a partir de un clip de audio.

Ve Audio2Face en acción

Criaturas y alienígenas

Impulsa la animación facial de criaturas fantásticas y alienígenas. Aquí tenemos a Digital Mark impulsando el rendimiento del alienígena.

Misty, el bot de chat animado

Misty fue presentado en GTC Spring 2020 y es un bot meteorológico interactivo que es impulsado por Audio2Face en tiempo de ejecución. Demostramos la reconversión de una malla humana realista a una malla de caracteres estilizada para ser utilizada como un agente de servicio interactivo.

Omniverse Machinima

Presentado durante el lanzamiento de la GeForce serie 30, Audio2Face se ve en la demostración de Omniverse Machinima. La animación facial es notoriamente compleja y de coste prohibitivo. Audio2Face automatiza la animación facial detallada para democratizar el proceso de creación de contenido 3D.   

NVIDIA Omniverse me está ayudando a conseguir resultados más naturales para mis humanos digitales; además, acelera mis flujos de trabajo para que pueda dedicarle más tiempo al proceso creativo.

— Anderson Rohr, artista 3D

Experimenta NVIDIA Omniverse hoy mismo

Encuentra la licencia adecuada que se adapte a tu flujo de trabajo 3D y empieza a explorar Omniverse de inmediato.

nvidia-omniverse-creators-3c33-D

Creadores

Descargarlo y crear es gratis

Omniverse actúa como un centro que conecta y mejora sin complicaciones aplicaciones creativas 3D unificando activos, bibliotecas y herramientas para conseguir un flujo de trabajo totalmente ininterrumpido, lo que permite a los artistas alcanzar nuevas alturas de libertad creativa.

Desarrolladores

Desarrolladores

Desarrollarlo y distribuirlo es gratis

Omniverse se ha creado pensando en los desarrolladores, y les permite personalizar sus flujos de trabajo 3D en cada capa para crear fácilmente nuevos conectores, extensiones, aplicaciones y microservicios de Omniverse.

nvidia-omniverse-enterprise-3c33-D

Enterprise

Prueba gratuita I Licencia anual

Omniverse Enterprise transforma los flujos de trabajo de diseño complejos de organizaciones de cualquier tamaño. Permite la colaboración en tiempo real con múltiples usuarios y ubicaciones a la vez que se usan aplicaciones diferentes y datos de proyectos centralizados.

Cómo se instala Omniverse Audio2Face

Descarga NVIDIA Omniverse

1

Descarga NVIDIA Omniverse y ejecuta la instalación.

Abre el iniciador de Omniverse

2

Una vez instalada, abre el iniciador de Omniverse.

Busca Audio2Face en la sección Aplicaciones y haz clic en Instalar

3

Busca Omniverse Audio2Face en la sección Aplicaciones y haz clic en Instalar y, a continuación, en Iniciar.

Requisitos del sistema
Elemento Especificaciones mínimas
Sistema operativo compatible Windows 10 de 64 bits (versión 1909 y posterior)
CPU Intel i7, AMD Ryzen
2,5 GHz o más
Núcleos de CPU 4 o posterior
RAM 16 GB como mínimo
Almacenamiento 500 GB SSD o superior
GPU Cualquier GPU RTX
VRAM 6 GB como mínimo
Mín. versión de controlador de vídeo Mira los últimos controladores aquí
Nota: Omniverse se ha creado para ejecutarse en cualquier máquina con tecnología RTX. Para obtener un rendimiento óptimo, te recomendamos que utilices GeForce RTX 3070, NVIDIA RTX A4000, 8Gb o superior.

Sumérgete en los tutoriales paso a paso

Descubre más aplicaciones de Omniverse

Descubre el conjunto completo de aplicaciones y conectores de NVIDIA Omniverse o prueba nuestras recomendaciones más abajo.

Crear

Acelera la creación de mundo avanzado con Pixar USD, ensambla y simula interactivamente, y renderiza escenas en tiempo real.

Código

Un entorno de desarrollo integrado para que los desarrolladores y los usuarios avanzados puedan crear fácilmente extensiones, aplicaciones o microservicios de Omniverse.

Machinima

Remezcla, vuelve a crear y redefine la narración de videojuegos animados con un kit de herramientas con tecnología de IA para creadores.

Ver

Revisa de forma colaborativa proyectos de diseño con esta potente herramienta de visualización fotorrealista y físicamente precisa.

Únete a nuestra comunidad

Accede a tutoriales

Aprovecha cientos de tutoriales y sesiones, así como nuestra formación para principiantes para empezar a usar USD

Conviértete en un omnívoro

¡Únete a nuestra comunidad! Asiste a nuestras transmisiones semanales en directo en Twitch y conéctate con nosotros en Discord y en nuestros foros.

Obtén asistencia técnica

¿Tienes problemas? Publica preguntas en los foros para obtener información de forma rápida de los expertos de Omniverse o consulta la documentación de la plataforma.

Muestra tu trabajo

¿Has creado una obra maestra de Omniverse? Envíala a la Galería Omniverse, donde puedes inspirarte e inspirar a los demás.

Conecta con nosotros

Mantente al día sobre las últimas novedades de NVIDIA Omniverse.