NVIDIA DLSS 3.5: Mejora del ray tracing con IA; próximamente este otoño para Alan Wake 2, Cyberpunk 2077: Phantom Liberty, Portal con RTX y más

NVIDIA ha sido pionera en hardware y software de IA que está impulsando avances increíbles en todas las industrias. NVIDIA DLSS, uno de nuestros primeros algoritmos importantes de IA, se introdujo hace cinco años y aumenta el rendimiento mediante la representación neuronal, posible gracias a los Núcleos Tensor dentro de cada GPU GeForce RTX.

Desde su lanzamiento inicial, los modelos de IA detrás de DLSS han seguido aprendiendo, lo que ha generado resultados aún mejores y nuevas innovaciones que multiplican aún más el rendimiento:

Hoy, avanzamos una vez más en la tecnología de renderizado con la introducción de NVIDIA DLSS 3.5, que presenta Ray Reconstruction, un nuevo modelo de IA que crea imágenes con ray tracing de mayor calidad para juegos y aplicaciones con ray tracing intensivo.

 

Ve nuestra charla técnica con el vicepresidente de investigación de aprendizaje profundo aplicado, Bryan Catanzaro, para aprender cómo funciona DLSS 3.5.

Alan Wake 2, Cyberpunk 2077, Cyberpunk 2077: Phantom Liberty, Portal con RTX, Chaos Vantage, D5 Render y NVIDIA Omniverse  agregarán soporte para NVIDIA DLSS 3.5 este otoño.

Descubre tú mismo los beneficios en este nuevo vistazo exclusivo a Cyberpunk 2077: Phantom Liberty, renderizado con DLSS 3.5 y Ray Tracing completo:

 

"Gracias a la tecnología inteligente de DLSS 3.5, impulsada por el poder de renderizado de la IA, puedes experimentar Cyberpunk 2077: Dogtown, la ubicación más nueva de Phantom Liberty, en su máxima expresión, con imágenes más nítidas, iluminación más precisa y las velocidades de cuadro más altas posibles". - Jakub Knapik, vicepresidente de arte, director de arte global, CD PROJEKT RED

Para apreciar los beneficios de Ray Reconstruction, veamos cómo funciona el trazado de rayos.

Primero, un motor de juego genera la geometría y los materiales de una escena, todos los cuales tienen atributos físicos que afectan su apariencia y cómo la luz interactúa con ellos. Luego se toma una muestra de rayos desde el punto de vista de la cámara, lo que determina las propiedades de las fuentes de luz en una escena y cómo reacciona la luz cuando golpea los materiales. Por ejemplo, si los rayos inciden en un espejo, se generan reflejos.

Sin embargo, disparar rayos para cada píxel de la pantalla es demasiado exigente desde el punto de vista computacional, incluso para los renderizadores fuera de línea que calculan escenas en el transcurso de varios minutos u horas. Por lo tanto, se deben utilizar muestras de rayos: éstas disparan un puñado de rayos en varios puntos de la escena para obtener una muestra representativa de la iluminación, la reflectividad y las sombras de la escena.

El resultado es una imagen ruidosa, moteada y con espacios, lo suficientemente buena como para determinar cómo debería verse la escena cuando se aplica el ray tracing.

Para completar los píxeles faltantes que no tenían ray tracing, los eliminadores de ruido ajustados a mano utilizan dos métodos diferentes: acumular temporalmente píxeles en múltiples fotogramas e interpolarlos espacialmente para combinar los píxeles vecinos. A través de este proceso, la salida bruta ruidosa se convierte en una imagen con ray tracing.

Estos eliminadores de ruido se ajustan y procesan manualmente para cada tipo de iluminación con ray tracing presente en una escena, lo que agrega complejidad y costo al proceso de desarrollo y reduce la velocidad de cuadros en juegos con alto ray tracing donde múltiples eliminadores de ruido operan simultáneamente para maximizar la calidad de la imagen.

Cada eliminador de ruido ajustado a mano acumula píxeles de múltiples fotogramas para aumentar los detalles, de hecho, robando rayos del pasado, pero a riesgo de introducir imágenes fantasmas, eliminar efectos dinámicos y reducir la calidad de otros. También interpola píxeles vecinos y combina esta información, pero a riesgo de mezclar demasiada información detallada o no mezclar lo suficiente y crear efectos de iluminación no uniformes.

La ampliación es la última etapa de la tubería de iluminación con ray tracing y es clave para experimentar los juegos más detallados y exigentes a velocidades de cuadro rápidas. Pero con la eliminación de ruido o la disminución de la calidad de los efectos, las limitaciones de los eliminadores de ruido ajustados a mano se amplifican, eliminando los detalles finos (conocidos como información de alta frecuencia) que los escaladores utilizan para generar una imagen nítida y limpia.

La solución: NVIDIA DLSS 3.5. Nuestra innovación más reciente, Ray Reconstruction, es parte de un renderizador neuronal mejorado impulsado por IA que mejora la calidad de imagen con ray tracing para todas las GPUs GeForce RTX al reemplazar los eliminadores de ruido ajustados a mano con una red de IA entrenada por supercomputadora NVIDIA que genera píxeles de mayor calidad en entre rayos muestreados.

Entrenado con 5 veces más datos que DLSS 3, DLSS 3.5 reconoce diferentes efectos de ray tracing para tomar decisiones más inteligentes sobre el uso de datos temporales y espaciales y retener información de alta frecuencia para una mejora de calidad superior.

Ray Reconstruction, entrenado utilizando imágenes renderizadas fuera de línea, que requieren mucha más potencia computacional de la que se puede entregar durante un juego en tiempo real, reconoce patrones de iluminación a partir de datos de entrenamiento, como los de iluminación global u oclusión ambiental, y los recrea en el juego como juegas. Los resultados son superiores al uso de eliminadores de ruido ajustados manualmente.

En Portal con RTX, con DLSS desactivado, el eliminador de ruido tiene problemas con la interpolación espacial, donde no combina suficientes píxeles, lo que crea un efecto de manchas. Además, no acumula suficientes píxeles buenos de fotogramas anteriores y el resultado es un efecto de ebullición en la luz. Con DLSS 3.5, reconoce ciertos patrones asociados con los reflejos y mantiene la imagen estable, acumulando píxeles precisos mientras combina los píxeles vecinos para generar reflejos de alta calidad.

 

En la siguiente escena de Cyberpunk 2077, la iluminación inexacta de los faros que rodea el automóvil es el resultado de que el denoiser ajustado a mano genera efectos de iluminación inexactos de fotogramas anteriores. DLSS 3.5 genera iluminación con precisión, por lo que puedes distinguir el haz de los faros y ver la luz reflejada en la acera frente al automóvil.

Las calles de Night City de Cyberpunk 2077 están llenas de reflejos de vallas publicitarias giratorias y luces de neón. Al activar DLSS 3.5, su calidad y claridad mejoran enormemente en toda la ciudad:

Las aplicaciones creativas tienen una amplia variedad de contenido que son difíciles para los eliminadores de ruido tradicionales, ya que requieren un ajuste manual por escena. Como resultado, al obtener una vista previa del contenido, obtiene una calidad de imagen subóptima. Con DLSS 3.5, la red neuronal de IA puede reconocer una amplia variedad de escenas, produciendo imágenes de alta calidad durante la vista previa y antes de dedicar horas a un renderizado final. D5 Render, una aplicación líder en la industria para arquitectos y diseñadores estará disponible con DLSS 3.5 este otoño.

“La integración de DLSS Ray Reconstruction con D5 Render marca nuestra tercera colaboración técnica con NVIDIA, después de DLSS SR y FG, que mejora aún más la calidad de imagen de las capacidades de renderizado en tiempo real de D5 Render. Esperamos explorar más posibilidades con NVIDIA en el futuro”. - Jessie Huang, vicepresidenta y directora de marketing, D5 Render

Con DLSS 3.5, brindamos una experiencia mejor y más rápida como una actualización gratuita, que se basa en las apreciadas mejoras que ya están disponibles en sus juegos favoritos.

Gracias a RTX, efectivamente tiene la potencia de 2 computadoras en tu PC o laptop: la primera, una supercomputadora NVIDIA que entrena el modelo DLSS AI con miles de millones de puntos de datos para mejorar el rendimiento y la calidad de la imagen. Y el segundo, tu tarjeta gráfica GeForce RTX, con núcleos tensoriales dedicados para ejecutar el modelo de IA en tiempo real, además de núcleos RT especializados, innovaciones como Shader Execution Reordering y la potencia bruta de cada GPU RTX, que ofrece lo mejor en ray tracing de clase.

En Cyberpunk 2077, el hermoso ray tracing completo que ofrece el modo Overdrive no se podría lograr sin problemas sin el poder de la IA. DLSS Super Resolución (SR) reconstruye la imagen 4K a partir de una entrada de resolución más baja, brindando un aumento espectacular del rendimiento y una excelente calidad de imagen.

Para aumentar aún más el rendimiento en los momentos más exigentes y llenos de acción, habilitamos DLSS Frame Generation (FG) en las GPUs GeForce RTX Serie 40, que analiza fotogramas secuenciales para crear fotogramas adicionales y aumentar aún más la fluidez.

Y ahora, NVIDIA DLSS 3.5 mejora aún más la calidad de la imagen para efectos de ray tracing al reemplazar múltiples eliminadores de ruido ajustados manualmente con Ray Reconstruction (RR).

 

Combinando superresolución, generación de fotogramas y reconstrucción de rayos, DLSS 3.5 multiplica las velocidades de fotogramas de Cyberpunk 2077 por un total de 5 veces en comparación con el renderizado nativo 4K DLSS OFF.

Ten en cuenta que los juegos con múltiples efectos de ray tracing pueden tener varios eliminadores de ruido que se reemplazan por una única red neuronal de Reconstrucción de rayos. En estos casos, Ray Reconstruction también puede ofrecer un aumento del rendimiento. En títulos con ray tracing menos intensivo y menos eliminadores de ruido, Ray Reconstruction mejora la calidad de la imagen, aunque puede tener un ligero costo de rendimiento.

Los usuarios de la serie GeForce RTX 40 pueden combinar la superresolución y la generación de fotogramas con Ray Reconstruction para obtener un rendimiento y una calidad de imagen impresionantes, mientras que los usuarios de GeForce RTX Serie 20 y Serie 30 pueden agregar Ray Reconstruction a su arsenal impulsado por IA junto con la superresolución y DLAA.

Ray Reconstruction es una nueva opción para que los desarrolladores mejoren la calidad de imagen de sus títulos con ray tracing y se ofrece como parte de DLSS 3.5. Los juegos rasterizados con DLSS 3.5 también incluyen nuestras últimas actualizaciones de Super Resolución y DLAA, pero no se beneficiarán de Ray Reconstruction debido a la falta de efectos de ray tracing.

DLSS 3.5 llega este otoño a los principales juegos y aplicaciones

NVIDIA DLSS 3.5 estará disponible este otoño en Alan Wake 2, Cyberpunk 2077, Cyberpunk 2077: Phantom Liberty, Portal con RTX, Chaos Vantage, D5 Render y NVIDIA Omniverse. Dirígete a nuestro artículo de anuncio de Gamescom 2023 RTX Games and Apps para obtener más información sobre la integración de DLSS 3.5 en cada uno.

Hace cinco años iniciamos un viaje revolucionario: redefinir los gráficos con renderizado neuronal e inteligencia artificial. DLSS ha recorrido un largo camino y hoy DLSS ON es la mejor manera de jugar. Las experiencias más inmersivas y realistas ahora dependen del poder de la IA, pero el impacto transformador de la IA en los gráficos apenas está comenzando y estamos ansiosos por ver dónde estaremos dentro de cinco años.

Mientras tanto, mejora tu experiencia utilizando NVIDIA DLSS en más de 330 juegos y aplicaciones lanzados. Se lanzan nuevos juegos DLSS casi todas las semanas, cuyas noticias se podrán encontrar aquí; simplemente regresa a nuestra página DLSS cada semana para conocer los últimos lanzamientos e integraciones; Esta semana en Gamescom 2023, anunciamos nuevos juegos DLSS 3, incluidos Call of Duty: Modern Warfare III, PAYDAY 3, Fortnite y el ya mencionado Alan Wake 2. Y en cada juego DLSS 3, también puedes aprovechar NVIDIA Reflex para que el juego tenga aún más capacidad de respuesta. Obten todos los detalles aquí.

Para ver nuestros otros anuncios de Gamescom 2023, dirígete aquí.