NVIDIA Omniverse Audio2Face

BETA

Omniverse Audio2Face

Genera de forma rápida y fácil animaciones faciales expresivas a partir de una fuente de audio con la tecnología de IA de Deep Learning de NVIDIA.

Animación Facial Sencilla

Omniverse Audio2Face beta simplifica la animación de un personaje 3D para que coincida con cualquier pista de voz en off, ya sea que esté animando personajes para un juego, una película, asistentes digitales en tiempo real o simplemente por diversión. Puedes utilizar la aplicación para realizar tareas interactivas en tiempo real o como una herramienta de creación de animación facial tradicional. Ejecuta los resultados en vivo o procésalos, depende de ti.

Cómo Funciona

Audio2Face se precarga con "Digital Mark", un modelo de personajes 3D que se puede animar con tu pista de audio, por lo que comenzar a trabajar es sencillo, solo selecciona tu audio y cárgalo. La entrada de audio se envía a una red neuronal profunda previamente entrenada y la salida conduce los vértices 3D de la malla de tu personaje para crear la animación facial en tiempo real. También tiene la opción de editar varios parámetros de posprocesamiento para editar el rendimiento del personaje. Los resultados que ves en esta página son principalmente salidas sin procesar de Audio2Face con pocos o ningún parámetros de posprocesamiento editados.

Aplicación Omniverse Audio2Face
 
Audio2Face genera la animación facial a través de la entrada de audio.

ENTRADA DE AUDIO

Usa una Grabación o Crea Animación en Vivo

Simplemente graba una pista de audio de voz, ingresa a la aplicación y observa cómo cobra vida tu rostro 3D. Incluso puedes generar animaciones faciales en vivo usando un micrófono.

Audio2Face podrá procesar cualquier idioma fácilmente. Además, continuamente lo actualizamos con más y más idiomas.  

TRANSFERENCIA DE PERSONAJES

Intercambio de Rostros en un Instante

Audio2Face te permite reorientar hacia cualquier rostro humano o con rostros humanos en 3D, ya sea realista o estilizado. ¡Mira esta prueba mientras reorientamos desde Digital Mark a un archivo de Rhino!

 
Anima la cara de cualquier personaje con Audio2Face
 
Usa varias instancias para generar animación facial para más de un personaje

ESCALABILIDAD DE SALIDA

Exprésate a ti Mismo o a Todo el Mundo a la Vez

Es fácil ejecutar varias instancias de Audio2Face con tantos personajes en una escena como desees, todas animadas con la misma o diferentes pistas de audio. Dale vida y sonido al diálogo entre un duo, una competencia de canto entre un trío, un cuarteto en sincronía y más. Además, puedes bajar o subir el nivel de la expresión facial en cada rostro y generar por lotes varios archivos de animación desde múltiples fuentes de audio.

CONVERSIÓN DE DATOS

Conectar y Convertir

La última actualización de Omniverse Audio2Face ahora permite la conversión de blendshape y también las opciones de exportación de blendweight. Además, la aplicación ahora admite la importación y exportación con Epic Games Unreal Engine 4 para generar movimiento en personajes de MetaHuman utilizando el conector Omniverse Unreal Engine 4.

 
Agrega emociones a la animación.
Agrega emociones a la animación.

CONTROL DE EMOCIONES

Dale Vida al Drama

Audio2Face te brinda la capacidad de elegir y animar las emociones de tu personaje al instante. La red de IA manipula automáticamente el rostro, los ojos, la boca, la lengua y el movimiento de la cabeza para que coincida con el rango emocional seleccionado y el nivel de intensidad personalizado, o, infiere automáticamente la emoción directamente del clip de audio.

Observa Audio2Face en Acción

Criaturas y Alienígenas

Impulsa la animación facial de criaturas y alienígenas fantásticos. Aquí tenemos a Digital Mark impulsando el rendimiento del alienígena.

Misty, el Chatbot Animado

Misty se presentó en GTC spring 2020 y es un bot meteorológico interactivo que está impulsado por Audio2Face en el tiempo de ejecución. Demostramos la reorientación de una malla humana realista a una malla de personaje estilizada para que se use como un agente de servicio interactivo.

Omniverse Machinima

Audio2Face se presentó durante el lanzamiento de la Serie GeForce 30 y se ve en la demostración de Omniverse Machinima . La animación facial es notoriamente compleja y costosa. Audio2Face automatiza la animación facial detallada para democratizar el proceso de creación de contenido 3D.   

NVIDIA Omniverse me está ayudando a lograr resultados más naturales para mis humanos digitales y a acelerar mi workflow para que pueda dedicar más tiempo al proceso creativo.

— Anderson Rohr, Artista 3D

Experimenta NVIDIA Omniverse Hoy

Encuentra la licencia adecuada para tu workflow 3D y comienza a explorar Omniverse de inmediato.

nvidia-omniverse-creators-3c33-D

Creadores

Libertad para Descargar y Crear

Omniverse funciona como un centro para conectar y mejorar a la perfección las aplicaciones creativas 3D, lo que unifica recursos, bibliotecas y herramientas para lograr un workflow verdaderamente ininterrumpido que permite a los artistas alcanzar nuevas alturas de la libertad creativa.

Desarrolladores

Desarrolladores

Libertad para Desarrollar y Distribuir

Omniverse se creó pensando en los desarrolladores y les brinda la capacidad de personalizar sus workflows 3D en cada capa para crear fácilmente nuevos microservicios, aplicaciones, extensiones y Conectores de Omniverse.

nvidia-omniverse-enterprise-3c33-D

Enterprise

Prueba Gratuita I Licencia Anual

Omniverse Enterprise transforma workflows de diseño complejos para organizaciones de cualquier escala. Permite la colaboración en tiempo real con varios usuarios y ubicaciones, mediante diferentes aplicaciones que usan datos de proyectos centralizados.

Cómo Instalar Omniverse Audio2Face

Descarga NVIDIA Omniverse

1

Descarga NVIDIA Omniverse y ejecuta la instalación.

Abre el Programa de Ejecución de Omniverse.

2

Una vez instalado, abre el Programa de Ejecución de Omniverse.

En la sección Aplicaciones, busca Audio2Face y haz clic en Instalar.

3

En la sección Aplicaciones, Busca Omniverse Audio2Face y haz clic en Instalar, luego en Iniciar.

Requisitos del Sistema
Elemento Especificaciones Mínimas
Compatibilidad con SO Windows 10 de 64 bits (versión 1909 y posteriores)
CPU Intel I7, AMD Ryzen
(2.5 GHz o superior)
Núcleos de CPU 4 o más
RAM 16 GB o más
Almacenamiento SSD de 500 Gb o más
GPU Cualquier GPU RTX
VRAM 6 GB o más
Versión de Driver de Video Mínima Consulta los drivers más recientes aquí.
Omniverse se desarrolló para ejecutarse en cualquier máquina con RTX. Para lograr el rendimiento ideal, recomendamos usar GeForce RTX 3070, NVIDIA RTX A4000, con 8 GB o más.

Conoce los Tutoriales Paso a Paso

Descubre Más Aplicaciones de Omniverse

Descubre el conjunto completo de Conexiones y Aplicaciones de NVIDIA Omniverse, o prueba nuestras recomendaciones a continuación.

Create

Acelera la construcción de mundos avanzados con USD de Pixar, y ensambla, simula y renderiza escenas de forma interactiva en tiempo real.

Code

Un entorno de desarrollo integrado para desarrolladores y usuarios avanzados que crean fácilmente extensiones, aplicaciones o microservicios de Omniverse.

Machinima

Combina, recrea y redefine la narración de videojuegos con animaciones mediante un conjunto de herramientas impulsadas por IA para los creadores.

View

Revisa de forma colaborativa proyectos de diseño con esta herramienta de visualización potente, fotorrealista y físicamente precisa.

Formar Parte de Nuestra Comunidad

Acceso a Tutoriales

Aprovecha cientos de tutoriales gratuitos, sesiones o nuestra capacitación para principiantes para comenzar a usar USD

Empieza a Usar Omniverse

¡Únete a nuestra comunidad! Asiste a nuestras transmisiones en vivo semanales en Twitch y conéctate con nosotros en Discord y nuestros foros.

Obtén Soporte Técnico

¿Tienes problemas? Publica tus preguntas en los foros para obtener una guía rápida de los expertos de Omniverse o consulta la documentación de la plataforma.

Muestra tu Trabajo

¿Creaste una obra maestra en Omniverse? Envíala a la Galería de Omniverse, donde podrás inspirarte e inspirar a los demás.

Conectarte con Nosotros

Recibe las últimas noticias sobre NVIDIA Omniverse.