NVIDIA Omniverse Audio2Face

BETA

Omniverse Audio2Face

Genera rápida y fácilmente animaciones faciales expresivas a partir de solo una fuente de audio con la tecnología de inteligencia artificial de deep learning de NVIDIA.

DESCARGAR

Animación Facial Simplificada

La versión beta de Audio2Face simplifica la animación de un personaje 3D para que coincida con cualquier pista de voz en off, ya sea que esté animando personajes para un game, película, asistentes digitales en tiempo real o simplemente por diversión. Puede utilizar la aplicación para uso interactivo en tiempo real o como una herramienta de creación de animación facial tradicional. Ejecute los resultados en vivo o posteriormente, depende de usted.

El Acceso Anticipado de la Aplicación Omniverse Audio2Face llegará pronto.

Audio2Face simplifies animation of a 3D character to match any voice-over track.

Cómo Funciona

Audio2Face viene precargado con “Digital Mark”, un modelo de personaje en 3D que se puede animar con su pista de audio, por lo que comenzar es simple: simplemente seleccione su audio y cárguelo. Luego, la entrada de audio se alimenta a una red neuronal profunda previamente entrenada y la salida impulsa los vértices 3D de la malla de tu personaje para crear la animación facial en tiempo real. También tienes la opción de editar varios parámetros de posprocesamiento para editar la interpretación de tu personaje. Los resultados que ve en esta página son en su mayoría salidas sin procesar de Audio2Face con pocos o ningún parámetro de posprocesamiento editado.

Omniverse Audio2Face App
 
Audio2Face generates facial animation through audio input.

ENTRADA DE AUDIO

Utilice una Grabación o Anime en Vivo

Simplemente grabe una pista de audio de voz, ingrese en la aplicación y vea cómo su rostro 3D cobra vida. Incluso puedes generar animaciones faciales en vivo a través de un micrófono.

Audio2Face podrá procesar cualquier idioma fácilmente. Y estamos actualizando continuamente con más y más idiomas. Consulte estas pruebas en inglés, francés, italiano y ruso.

TRANSFERENCIA DE CARACTERES

Cambio de Rostro en un Instante

Audio2Face te permite redirigir a cualquier rostro humano o humano en 3D, ya sea realista o estilizado. ¡Vea esta prueba mientras cambiamos de Digital Mark a un Rhino cantante! 

 
Animate any character face with Audio2Face
 
Use multiple instances to generate facial animation for more than one character

MÚLTIPLES INSTANCIAS

Solo o Con Varias Caras a la Vez

Es fácil ejecutar varias instancias de Audio2Face con tantos personajes en una escena como desee, todos animados de la misma o diferentes pistas de audio. Respire vida y sonido en el diálogo entre un dúo, un canto entre un trío, un cuarteto sincronizado, y más allá. Además, puede subir o bajar el nivel de expresión facial en cada rostro.

CONVERSIÓN DE DATOS

Conectar y Convertir

La última actualización de Omniverse Audio2Face ahora permite la conversión de blendshape y también las opciones de exportación de blendweight. Además, la aplicación ahora admite exportación e importación con Epic Games Unreal Engine 4 para generar movimiento en personajes MetaHuman utilizando Unreal Engine 4 Omniverse Connector.

 
Add emotions to your animation.
Add emotions to your animation.

CONTROL DE EMOCIONES

Trae el Drama

Audio2Face te ofrece la posibilidad de elegir y animar las emociones de tu personaje en un abrir y cerrar de ojos. La red manipula automáticamente el movimiento de la cara, los ojos, la boca, la lengua y la cabeza para que coincida con el rango emocional seleccionado y el nivel personalizado de intensidad.

Próximamente.

Vea Audio2Face en Acción

Criaturas y Extraterrestres

Criaturas y Extraterrestres

Impulsa la animación facial de criaturas fantásticas y extraterrestres. Aquí tenemos a Digital Mark impulsando el desempeño del Alien.

Misty, el Bot de Chat Animado

Misty el Chatbot Animado

Presentado en GTC Spring 2020, Misty es un bot meteorológico interactivo impulsado por Audio2Face en tiempo de ejecución. Demostramos la reorientación de una malla humana realista a una malla de caracteres estilizada para ser utilizada como un agente de servicio interactivo.

Audio2Face works with Omniverse Machinima.

Omniverse Machinima

Presentado durante el lanzamiento de la serie GeForce 30, Audio2Face se ve en la demostración de Omniverse Machinima. La animación facial es notoriamente compleja y tiene un costo prohibitivo. Audio2Face automatiza la animación facial detallada para democratizar el proceso de creación de contenido 3D.

Omniverse para Creadores

Los artistas, animadores y diseñadores pueden experimentar workflows más rápidos y sin fricciones mediante el uso de múltiples aplicaciones 3D simultáneamente dentro de Omniverse, renderizando escenas en tiempo real y con total fidelidad, sin tener que importar o exportar entre aplicaciones.

MÁS INFORMACIÓN

PROFUNDIZAR EN EL ÚLTIMO CONTENIDO DE OMNIVERSE

COMIENCE CON OMNIVERSE AUDIO2FACE

Omniverse Audio2Face funciona en cualquier dispositivo NVIDIA RTX, desde la computadora portátil hasta el data center. Descarga Omniverse para comenzar a explorar lo que puedes hacer.

Download NVIDIA Omniverse

1

Descarga NVIDIA Omniverse y ejecuta el instalador.

Open the Omniverse Launcher

2

Una vez instalado, abre el ejecutador de Omniverse.

Find Audio2Face in the Apps section and click Install

3

Busque Audio2Face en la Sección de aplicaciones y haga clic en Instalar, luego en Iniciar.

OBTENGA UNA MIRADA MÁS PROFUNDA A AUDIO2FACE

Vea esta descripción general técnica presentada en GTC 2020.

MIRAR BAJO DEMANDA

Sumérjase en los Últimos Avances en Colaboración y Simulación Virtual

Vea cómo Omniverse puede transformar su workflow de animación de personajes en 3D en nuestras principales sesiones de GTC de 2021, ahora disponibles bajo demanda.

Ver Ahora 
Requisitos del Sistema
Elemento Especificaciones Mínimas
Compatibilidad con OS Windows 10 64-bit 1909 o más
CPU Intel I7, AMD Ryzen
2.5GHz o más
CPU Cores 4 o más
RAM 16Gb o más
Almacenamiento SSD de 500Gb o superior
GPU Cualquier GPU RTX
VRAM 6Gb o más
Versión de Driver de Video Mínimaa 4Vea los drivers más recientes aquí
Nota: Omniverse está diseñado para ejecutarse en cualquier máquina con tecnología RTX. Para un rendimiento ideal, recomendamos utilizar GeForce RTX, NVIDIA RTX A4000 con 8Gb o superior.

SOPORTE

Join the Omniverse Forums
See the support documentation and guides
Watch Omniverse video tutorials and trainings
ENTRENAMIENTO DE DLI

Enter the Omniverse

Deep dive into the platform through a series of GTC webinars hosted by Omniverse experts in various industries.

LEARN MORE

Más Aplicaciones de Omniverse

Las aplicaciones Omniverse están diseñadas específicamente para mejorar workflows específicos. Véalos en acción.

nvidia-omniverse-view-64

View

Revise de forma colaborativa proyectos de diseño con esta potente herramienta de visualización fotorrealista y físicamente precisa.

MÁS INFORMACIÓN
nvidia-omniverse-create-64

Create

Acelera la construcción de mundos avanzados y ensambla, simula y renderiza escenas de forma interactiva en Pixar USD en tiempo real.

MÁS INFORMACIÓN
nvidia-omniverse-kaolin-icon-64

Kaolin

Simplifique y acelere la investigación de deep learning en 3D utilizando la biblioteca Kaolin PyTorch de NVIDIA con esta poderosa herramienta de visualización.

MÁS INFORMACIÓN
Machinima

Machinima

Mezcla, recrea y redefine la narración de videojuegos animados con un kit de herramientas con tecnología de inteligencia artificial para jugadores.

MÁS INFORMACIÓN
Isaac Sim

Isaac Sim

Importe, cree y pruebe robots en un entorno 3D de física fotorrealista y de alta fidelidad.

MÁS INFORMACIÓN
Drive Sim

DRIVE Sim

Aproveche una experiencia de simulación para el desarrollo de vehículos autónomos que es prácticamente indistinguible de la realidad.

MÁS INFORMACIÓN

POR FAVOR REGÍSTRESE PARA DESCARGAR

Productos

Recursos

Comunidad