NVIDIA Omniverse Audio2Face

Omniverse Audio2Face

Omniverse Audio2Face es una aplicación con IA que genera expresivas animaciones faciales a partir de una fuente de audio.

VISTA PREVIA DEL ACCESO ANTICIPADO DE AUDIO2FACE

Audio2Face simplifica la animación de un personaje 3D para que coincida con cualquier pista de narración, ya sean personajes de un juego, película, asistentes digitales en tiempo real o simplemente por diversión. Puede usarlo para aplicaciones interactivas en tiempo real o como una herramienta tradicional de creación de animación facial. Ejecute los resultados en vivo o más tarde: usted decide.

El Acceso Anticipado de la Aplicación Omniverse Audio2Face llegará pronto.

CÓMO FUNCIONA

La aplicación Omniverse Audio2Face se basa en un artículo de investigación original de NVIDIA. Audio2Face viene precargado con "Digital Mark", un modelo de personaje en 3D que puede animarse con su pista de audio, por lo que comenzar es simple. Simplemente seleccione su audio y cárguelo en la aplicación. La tecnología alimenta la entrada de audio a una red neuronal profunda previamente entrenada y la salida de la red impulsa la animación facial de tu personaje en tiempo real. Los usuarios tienen la opción de editar varios parámetros de posprocesamiento para editar la interpretación del personaje. La salida de la red luego maneja los vértices 3D de la malla de su personaje para crear la animación facial. Los resultados que ve en esta página son en su mayoría salidas sin procesar de Audio2Face con pocos o ningún parámetro de posprocesamiento editado.

(Nota: el soporte directo de blendshape se lanzará en una fecha posterior)

Omniverse Audio2Face App

VEA AUDIO2FACE EN ACCIÓN

Idiomas

Audio2Face podrá procesar cualquier idioma fácilmente. Añadimos más y más idiomas periódicamente. Consulte estas pruebas en Inglés, Francés, Italiano y Ruso.

Misty, el Bot de Chat Animado

Presentada en GTC Spring 2020, Misty es un bot meteorológico interactivo impulsado por Audio2Face en tiempo de ejecución. Demostramos la reorientación de una malla humana realista a una malla de caracteres estilizada para ser utilizada como un agente de servicio interactivo.

Omniverse Machinima

Presentado durante el lanzamiento de la serie GeForce 30, Audio2Face se ve en la demostración de Omniverse Machinima. La animación facial es notoriamente compleja y tiene un costo prohibitivo. Audio2Face automatiza la animación facial detallada para democratizar el proceso de creación de contenido 3D.

PRÓXIMAS CARACTERÍSTICAS - TRANSFERENCIA DE CARACTERES

Rostros Humanos

Audio2Face puede usar cualquier pista de audio impulsada por diálogos y, finalmente, tiene la capacidad de volver a enfocarse en cualquier rostro humano 3D, ya sea realista o estilizado. Vea esta prueba mientras reorientamos de Digital Mark a Rain.

Criaturas y Extraterrestres

Esta función le permite reorientar e impulsar la animación facial de criaturas fantásticas y extraterrestres. Aquí tenemos a Digital Mark impulsando el desempeño del Alien.

OBTENGA UNA MIRADA MÁS PROFUNDA A AUDIO2FACE

Vea esta descripción general técnica presentada en GTC 2020.

Requisitos del Sistema
Elemento Especificaciones Mínimas
Compatibilidad con OS Windows 10 64-bit, 1909 and up
CPU Intel I7, AMD Ryzen
CPU Cores 4 o más
RAM 16Gb o más
Almacenamiento SSD de 500Gb o superior
GPU Cualquier GPU RTX
VRAM 6Gb o más
Versión de Driver de Video Mínimaa 455.28 (Linux), 456.71 (Windows)
Nota: Omniverse está diseñado para ejecutarse en cualquier máquina con tecnología RTX. Para un rendimiento ideal, recomendamos utilizar GeForce RTX 2080, Quadro RTX 5000 o superior. Para obtener los controladores más recientes, visite aquí.

SOPORTE

Inventemos el Futuro Juntos

Descubra cómo la colaboración y la simulación de próxima generación están acercando el futuro a los creadores, innovadores y empresas de todas las industrias.

Enter the Omniverse

Deep dive into the platform through a series of GTC webinars hosted by Omniverse experts in various industries.

Más Aplicaciones de Omniverse

Las aplicaciones Omniverse están diseñadas específicamente para mejorar workflows específicos. Véalos en acción.

nvidia-omniverse-view-64

View

Diseño colaborativo, visualización inmersiva y renderizado fotorrealista para arquitectura, ingeniería y construcción.

nvidia-omniverse-create-64

Create

Acelera la construcción de mundos avanzados y ensambla, simula y renderiza escenas de forma interactiva en Pixar USD en tiempo real.

nvidia-omniverse-kaolin-icon-64

Kaolin

Simplifique y acelere la investigación de deep learning en 3D utilizando la biblioteca Kaolin PyTorch de NVIDIA con esta poderosa herramienta de visualización.

nvidia-omniverse-machinima-64

Machinima

Mezcla, recrea y redefine la narración de videojuegos animados con un kit de herramientas con tecnología de inteligencia artificial para jugadores.

nvidia-omniverse-isaac-sim-icon-64

Isaac Sim

Importe, cree y pruebe robots en un entorno 3D de física fotorrealista y de alta fidelidad.