NVIDIA DLSS 5 지원 시작: 3D 가이드 뉴럴 렌더링이 NBA 2K27에서 데뷔하며, 모든 GeForce RTX 50 시리즈 GPU 및 GeForce NOW에서 즐기세요.

NVIDIA는 PC 게이밍의 경계를 지속적으로 재정의했습니다. 실시간 레이 트레이싱 도입부터 DLSS Super Resolution, Frame Generation 및 Ray Reconstruction을 지원하는 선구적인 AI 기반 그래픽에 이르기까지 RTX 기술은 게임이 렌더링되고 경험되는 방법을 혁신했습니다.

이제 3D 가이드 뉴럴 렌더링을 도입하는 DLSS 5가 출시됩니다. 이는 AI를 사용하여 실시간 그래픽을 그 어느 때보다 할리우드급 포토리얼리즘에 가깝게 구현하는 중요한 진전입니다.

NVIDIA의 응용 딥 러닝 연구 책임자 Edward Liu와 콘텐츠 기술 책임자 Gabriele Leone로부터 DLSS 3D 가이드 뉴럴 렌더링 및 그 예술적 컨트롤이 어떻게 작동하는지 확인해 보세요.

개발자 Visual Concepts와 퍼블리셔 2K의 NBA 2K27에서 지금 바로 DLSS 5를 이용할 수 있으며, 모든 GeForce RTX 50 시리즈 GPU와 노트북, 그리고 GeForce NOW를 지원합니다. 이 기술은 게임 아티스트가 창의적인 비전에 맞춰 시각적 충실도를 높이기 위해 해당 기술을 어떻게 활용할 수 있는지 보여주는 첫걸음입니다.

“가장 좋은 점은 저희에게 제공되는 제어 수준입니다. 기존 아트 방향에 맞게 전체 톤과 스타일을 설정한 다음, 픽셀당 업리프트 컨트롤 마스크를 사용하여 가장 중요한 부분에서 정밀하게 캐릭터의 디테일을 미세 조정할 수 있습니다. 최상의 케어로 그들의 모습을 존중하고 싶거든요.” - Peter Kavic, 수석 프로듀서 - Visual Concepts

2x NBA 올스타 및 올림픽 금메달리스트 Tyrese Haliburton은 최근 NVIDIA GeForce 에반젤리스트 Jacob Freeman과 함께 NBA 2K27에서 DLSS 5를 처음 확인했습니다. 아래 클립에서 생생한 게임 외관에 대한 이야기를 확인해 보세요.

GeForce 출시 이후 NVIDIA는 조명, 반사, 그림자가 물리 법칙을 따르는 현실적인 세계를 구현할 수 있도록, 게임 개발자에게 필요한 그래픽 성능을 지속적으로 제공해왔습니다.

2001년 GeForce 3을 지원하는 프로그래밍 가능 셰이더부터 2006년 GeForce 8800 GTX를 지원하는 CUDA, 2018년 GeForce RTX 2080 Ti를 지원하는 실시간 레이 트레이싱, 2025년 GeForce RTX 5090을 지원하는 패스 트레이싱 및 뉴럴 셰이더까지 주요 아키텍처 혁신과 컴퓨팅 성능을 375,000배 증가시켰습니다.

하지만 할리우드 수준의 실사 품질은 여전히 도달하기 어렵습니다. 포토리얼 할리우드 VFX 프레임은 단일 프레임을 렌더링하는 데 몇 시간 또는 며칠이 걸릴 수 있는 반면, 게임 개발자는 부드러운 경험을 위해 초당 60프레임 이상을 렌더링해야 합니다. 결과적으로 게임 개발자는 전통적으로 실시간 성능을 달성하기 위해 예술적 비전을 축소해야 했습니다. 개발자가 무한한 수의 광선을 쏠 수 있다고 해도, 장면 콘텐츠 자체가 축소되어야 하기 때문에 렌더링된 프레임은 여전히 실물처럼 사실적이지 않을 것입니다. 예를 들어, 머리카락 가닥은 단순화된 지오메트리로 대체되며, 피부와 같은 복잡한 다층 재질은 자연스러운 깊이를 잃습니다.

각 프레임을 무차별 강제 렌더링하거나 장면에 더 많은 세부를 추가하는 대신 포토리얼리즘에 대한 대체 접근 방식, 생성형 AI가 등장했습니다.

물리적 세계로부터 복잡한 조명 패턴을 학습하여 생성형 모델은 백라이트 때 머리카락이 어떻게 빛나는지, 또는 사람의 피부와 같은 복잡한 다층 재질을 통해 빛이 자연스럽게 흩어지는 방법과 같은 기존 렌더링이 어려움을 겪는 사실적인 조명 효과를 생성할 수 있습니다.

그러나 기존 생성형 모델은 크고 느리며 본질적으로 확률에 의존합니다. 텍스트 프롬프트를 10번 입력하면 표준 확산 모델은 10개의 완전히 다른 결과를 출력합니다. 이러한 예측 불가능성은 아티스트가 좋아하는 결과를 선택할 수 있는 오프라인 이미지 생성에서는 좋지만, 인터랙티브 게임은 플레이어 입력에 따라 절대적인 픽셀 일관성, 잠긴 캐릭터 정체성 및 프레임 간 안정성이 필요합니다. 이러한 예측 불가능성은 캐릭터의 얼굴이나 환경이 1밀리초 단위로 무작위로 변할 수 없는 게이밍 환경에는 적합하지 않습니다.

2018년에 처음 출시된 NVIDIA DLSS는 AI를 사용하여 성능을 향상시키는 업계 표준이 되었으며, 처음에는 Super Resolution을 지원했으며, 뒤를 이어 Frame Generation 및 Multi-Frame Generation을 지원했습니다. 결합된 오늘날의 DLSS 4.5 기술 제품군은 AI를 사용하여 화면에 표시된 모든 24개 픽셀 중 23개를 그릴 수 있습니다.

이제 DLSS는 성능을 넘어 비주얼 품질을 혁신하는 방향으로 진화하고 있습니다. 이전 DLSS 기술은 더 높은 해상도의 이미지, 추가 프레임 또는 더 깨끗한 레이 트레이싱 조명을 제공하기 위해 기존 장면 데이터를 재구성하는 데 중점을 두었지만, 3D 가이드 뉴럴 렌더링을 지원하는 DLSS 5는 AI를 사용하여 한때 실시간 성능 제약으로 인해 개발자들이 제거해야 했던 풍부한 조명과 재질 세부 사항을 생성함으로써 다음 단계를 제시하며, 이를 통해 개발자들은 원래의 예술적 비전을 실현할 수 있게 되었습니다.

또한 텍스트 프롬프트에서 프레임을 생성하는 대신, 3D 가이드 뉴럴 렌더링은 아티스트가 디자인한 지오메트리, 텍스처 및 조명 버퍼가 포함된 게임 엔진의 렌더링된 프레임을 확고한 기반으로 사용합니다. DLSS 5는 그래픽 파이프라인의 최종 렌더링 단계가 되며, 엔진 프레임이 남아 있어야 하는 것을 정의하고 아티스트가 변경될 수 있는 것을 지정하는 동안 생생한 조명과 머티리얼을 장면에 주입합니다.

DLSS 5는 프레임의 색상과 모션 벡터를 입력으로 받아, 확정적이고 시간적으로 안정적이며 게임 콘텐츠에 기반한 생생한 조명과 머티리얼을 구현합니다.

DLSS 5를 제공하기 위해 새로운 실시간 AI 모델을 발명해야 했으며, 이를 통해 예술적 의도 보존, 시간적 안정성 보장, 밀리초 단위의 실행 속도 달성이라는 세 가지 근본적인 엔지니어링 과제를 해결했습니다.

첫째, DLSS 5는 항상 같은 결과가 나오도록 설계되어 동일한 입력 프레임을 처리할 때 일관된 출력을 제공합니다. 아티스트와 게임 엔진이 제작한 오리지널 프레임을 기반으로, 이 모델은 화면상의 오브젝트, 재질, 공간 관계 및 광원을 분석합니다. 이 모델은 색상, 표면 알베도, 상세 조명 및 표면 노멀과 같은 엔진 데이터를 인식하도록 학습함으로써 렌더링된 프레임에 직접 고정됩니다.

DLSS 5는 오브젝트, 재질 및 광원과 같은 오브젝트 수준 장면 의미를 인식 

결과적으로 DLSS 5는 생생한 재질 상호작용으로 장면을 풍부하게 하며, 자연 피부 서브서피스 스캐터링, 머리카락 및 잎을 통한 사실적인 광 전송, 그리고 글로벌 일루미네이션과 함께 더 깊은 접촉 그림자를 도입합니다.

둘째, DLSS 5는 실시간 프레임-바이-프레임 시간적 안정성을 제공합니다. 배치 프레임 시퀀스에서 작동하는 비디오 생성 모델과 달리, DLSS 5는 엄격한 one-frame-in, one-frame-out 모델에서 작동합니다. 게임 엔진의 모션 벡터를 직접 활용하여 DLSS 5는 생성된 모든 프레임이 안정적이도록 보장하며, 플레이어가 이동할 때에도 시각적 흔들림, 스위밍 또는 시간적 드리프트를 제거합니다.

셋째, 실시간 3D 렌더링 파이프라인을 위해 명확하게 설계된 빠른 특수 AI 모델을 발명했습니다. 이 콤팩트 네트워크는 렌더링된 프레임에서 엔진 데이터를 직접 해석하고 GeForce RTX 50 시리즈 GPU의 강력한 Tensor 코어를 활용하여 복잡한 조명과 재질을 실시간으로 렌더링합니다. 단일 GPU에서 로컬로 실행되며, 최대 4K 해상도에서 부드러운 프레임 레이트를 유지합니다.

개발자를 위한 통합은 간단하며, DLSS 기술 제품군 전반에 이미 활용되고 있는 동일한 NVIDIA Streamline 프레임워크와 Unreal Engine 게임을 위한 Unreal Engine 5 플러그인을 활용합니다. DLSS 5는 옵션 및 독립적인 기능으로 작동하여 스튜디오에 Super Resolution, Multi Frame Generation 및 Ray Reconstruction과 함께 적합하게 사용할 수 있는 유연성을 제공합니다.

전통적인 래스터화, 레이 트레이싱 및 패스 트레이싱과 함께 작동하여 DLSS 5는 전통적인 게임 렌더링과 실시간 뉴럴 그래픽이 결합하여 시네마틱의 격차를 좁히는 새로운 시대의 시작을 나타냅니다.

이미지를 더 사실적으로 만드는 것은 궁극적으로 창조적인 결정이며, 이것이 DLSS 5가 아트 디렉션 도구를 개발자에게 직접 제공하는 이유입니다. DLSS 5는 팀이 컴퓨팅 및 VRAM 예산으로는 모델링하고 명시적으로 렌더링하다 할 수 없는 포토리얼 디테일을 추가할 수 있도록 지원합니다. 또한 다양한 모델과 컨트롤을 추가하여 아티스트가 적용 방식과 위치를 직접 연출할 수 있도록 합니다. 게이머에게는 간단한 켜기 또는 끄기 토글입니다.

먼저 DLSS 5가 예술적 의도를 보존하는 방법을 살펴봅시다. 라면 요리사가 나오는 이 예시에서 기본 얼굴 비율과 지오메트리는 아티스트가 설계한 그대로 정확하게 유지됩니다. 활성화되면 DLSS 5는 빛 응답과 재질 디테일을 향상시킵니다. Ambient occlusion은 헤드밴드 주변에 정의된 깊이를 추가하며, 향상된 서브서피스 스캐터링을 통해 빛이 귀를 자연스럽게 투과합니다. 이러한 미묘한 추가 기능은 그의 핵심 정체성을 변경하지 않고 캐릭터와 장면을 향상시킵니다.

DLSS 5 SDK를 통해 개발자는 다양한 출력을 생성하는 다양한 매개변수 가중치를 갖춘 여러 모델을 선택할 수 있으며, 이를 통해 게임에 가장 적합한 모델을 선택할 수 있습니다.

이 모델 선택은 전체 게임에 적용할 수도 있고, 장면마다 모델을 조합하여 사용할 수도 있습니다. 예를 들어, 아티스트는 조밀한 옥외 식물을 위한 하나의 모델과 극적인 실내 장면을 위한 다른 모델을 선택할 수 있습니다. 또한 개발자는 게임플레이와 컷신을 위해 다양한 모델을 조합하여 자신의 예술적 비전에 가장 적합한 것을 선택할 수 있습니다.

또한 DLSS 5는 Structure Intensity 및 Tone Intensity 조정을 제공합니다. Structure Intensity는 주변 오클루션, 반사 및 표면 하부의 산란과 같은 고주파 세부를 제어합니다. 이 컨트롤을 통해 개발자는 게임에서 사실성을 높일 수 있는 큰 레버를 갖출 수 있습니다.

Tone Intensity를 통해 개발자는 더 넓은 조명 및 색상 응답과 같은 저주파 세부 정보를 제어할 수 있습니다. 이를 통해 개발자는 이 값을 0으로 설정하여 렌더링된 프레임의 정확한 색상을 표시하거나 설정을 높여 장면에 기반한 색조 조정을 할 수 있습니다. 이 기능을 통해 아티스트는 출력에 어느 정도의 향상을 적용할지 결정할 수 있습니다.

향상된 기능이 의도된 곳에만 적용되도록 DLSS 5는 장면 오브젝트를 자동으로 인식하는 의미적인 AI 마스킹을 지원하여, 개발자가 캐릭터를 유지하면서 환경 향상을 높이거나 그 반대로 설정할 수 있도록 합니다.

또한 엔진 수준 마스킹을 통해 아티스트는 유리제품, 물방울 또는 잎과 같은 특정 소품이나 에셋 그룹을 격리하고, 주변 요소를 변경하지 않으면서 게임의 특정 요소에 커스텀 신경 조명을 적용할 수 있습니다.

뉴럴 렌더링 결과는 엔진의 기본 프레임에 확실히 기반을 두고 유지되며, 이는 최종 출력의 품질이 입력의 충실도에 따라 스케일링됨을 의미합니다.

DLSS 5는 기존 래스터화된 그래픽을 눈에 띄게 향상시키지만, 레이 트레이싱 또는 패스 트레이싱 조명과 같은 더 풍부한 소스 데이터를 모델에 제공하면 극적으로 더 정확한 결과를 얻을 수 있습니다. 즉, 게임에서 제공하는 기초 정보의 품질이 높을수록 최종 출력이 향상됩니다.

스튜디오와 긴밀한 파트너십을 통해 작업함에 따라, 개발자 피드백은 우리가 기술을 개선하고 모델 및 컨트롤 제품군을 확장하는 방식을 직접적으로 형성합니다.

25년 이상 동안 Visual Concepts는 게이밍에서 가장 정통 스포츠 경험으로 NBA 2K를 제공했습니다. 그들은 게임 내 경험이 실제 NBA 또는 WNBA 방송을 시청하는 것과 가능한 한 가깝게 느껴지도록 하는 데 중점을 두고 있습니다.

Visual Concepts 및 2K와의 긴밀한 파트너십을 통해 DLSS 5 3D 가이드 뉴럴 렌더링을 NBA 2K27에 적용하여, 플레이어 경험 측면에서 새로운 수준의 사실성을 구현했습니다.

GeForce RTX 50 시리즈 PC 및 노트북은 물론, 클라우드의 NVIDIA 운영 GeForce RTX 5080 기반 게이밍 리그에서 스트리밍하는 GeForce NOW Ultimate 멤버도 즐기실 수 있습니다.

Visual Concepts는 DLSS 5를 사용하여 NBA 2K27을 향상시키고 조정하여 더욱 사실적으로 만듭니다. DLSS 5를 사용하면 실제 운동 선수로부터 스캔한 얼굴 지오메트리를 유지하면서 빛이 플레이어의 귀를 어떻게 통과하는지, 피부의 자연스러운 조명, 그리고 빛이 머리카락에 어떻게 맺히는지 확인할 수 있습니다.

“DLSS 3D 가이드 뉴럴 렌더링은 재질과 조명의 시각적 품질을 향상시키는 데 도움을 주어 게임 전반에 걸쳐 포토리얼리즘의 비약적인 발전을 가져왔습니다.” Visual Concepts의 수석 프로듀서 Peter Kavic은 이렇게 얘기합니다.

DLSS 5를 활성화하면 All-Star 가드 Cade Cunningham에게 눈에 띄는 업그레이드를 제공합니다. 개선된 피부 서브서피스 스캐터링은 아레나 조명 아래에서 생생한 따뜻함을 선사하고, 더 선명한 접촉 그림자는 목과 저지 칼라를 따라 더 미세한 디테일을 살려주며, 자연광 전송은 머리카락의 선명도를 높여 전체적인 사실감을 향상시킵니다.

DLSS 5는 또한 All-NBA 포인트 가드 Tyrese Haliburton의 시각적 충실도를 높입니다. 서브표면 산란은 아레나 조명 아래에서 그의 얼굴에 사실적인 따뜻함을 제공하여 코와 턱 아래에 정확한 접촉 그림자를 드리웁니다. 또한 정제된 앰비언트 오클루션은 압축 팔 슬리브의 접힘 전체에 선명한 그림자 정의를 추가합니다.

코트사이드의 관중과 직원들 또한 자연스러운 서브서피스 스캐터링과 모델의 이미지 품질을 높여주는 선명한 접촉 그림자를 통해 더 풍부한 조명 및 재질 반응을 얻게 됩니다.

NBA 2K27의 DLSS 기술 풀 스위트를 사용하여, Ultra Preset 및 레이 트레이싱을 지원하는 4K에서 GeForce RTX 5090 사용자는 DLSS 5로 최대 370 프레임/초로 플레이할 수 있으며, 최상의 경험을 제공합니다.

2560x1440에서 GeForce RTX 시리즈 게이머는 Ultra Preset, 레이 트레이싱, DLSS 5가 향상된 NBA 2K27을 GeForce RTX 5090에서 최대 초고속 590fps, GeForce RTX 5080에서 최대 410fps, GeForce RTX 5070 Ti에서 최대 350fps, GeForce RTX 5070에서 최대 260fps의 속도로 경험할 수 있습니다.

1920x1080에서 사실상 모든 GeForce RTX 50 시리즈 게이머는 DLSS 5와 함께 Ultra Preset을 사용하여 레이 트레이싱을 지원하는 NBA 2K27을 경험할 수 있습니다.

DLSS 5는 3D 가이드 뉴럴 렌더링, Super Resolution 및 Multi Frame Generation과 결합되어 더 높은 프레임 레이트와 크게 향상된 이미지 품질을 제공합니다. DLSS 5는 자연 피부 서브서피스 스캐터링, 정교한 얼굴 머리카락 조명 및 그의 저지와 농구공 전반의 더 깊은 접촉 그림자를 통해 Jayson Tatum을 생생하게 표현합니다.

DLSS ON을 사용하면 GeForce RTX 5090에서 레이 트레이싱을 적용한 Ultra Settings의 4K 해상도에서 프레임 레이트가 370 FPS로 향상됩니다

NBA 2K27에서 DLSS 5를 활성화하려면 플레이어가 최신 GeForce Game Ready 드라이버인 616.64 WHQL을 다운로드하여 설치해야 하며, 게임 내 DLSS 뉴럴 렌더링 옵션을 확인할 수 있습니다.

• 웹사이트 또는 NVIDIA App에서 최신 GeForce Game Ready 드라이버를 다운로드하여 설치하세요.
• 게임 내에서 “비디오 설정”을 선택하고 “DLSS 뉴럴 렌더링” 켜기
• 기타 DLSS Super Resolution, Frame Generation 및 NVIDIA Reflex 옵션을 원하는 대로 구성
• 게임플레이 및 리플레이 중 키보드의 F9 키를 눌러 DLSS 뉴럴 렌더링을 토글하세요

3월 DLSS 5 초기 발표 이후 진전은 빠르게 진행되었습니다. 듀얼 GeForce RTX 5090에서 실행되던 것에서 이제 단일 그래픽 카드까지, 단 6개월 만에 5X 성능 향상을 달성하여 모든 GeForce RTX 50 시리즈 GPU와 노트북 GPU에서 DLSS 5를 사용할 수 있게 되었습니다. 이 마일스톤은 체계적인 파이프라인 최적화와 더 빠른 실행과 더 나은 이미지 품질을 모두 제공하는 신경 모델 정제의 조합에서 비롯됩니다.

최적화 곡선은 평탄화되지 않고 있으며, 추가적인 최적화 작업을 활발히 진행하고 있습니다. 가을에 제공될 예정인 모델 업데이트가 오늘의 기준을 넘어 성능을 향상시킬 것으로 기대합니다. 10년 이상의 DLSS 전문 지식을 바탕으로 성능과 이미지 품질의 한계를 지속적으로 뛰어넘기 위해 최선을 다하고 있으며, 이는 시작에 불과합니다.

DLSS 5는 AI와 그래픽 분야 모두에서 획기적인 기술이며, 게임을 위한 새로운 수준의 사실성을 제공합니다:

• 3D-가이드 및 4K 실시간: 단일 GeForce RTX 50 시리즈 GPU에서 최대 4K로 실행되는 완전히 결정적이고 시간적으로 일관된 뉴럴 렌더링
• Frame Is The Foundation: 렌더링된 프레임의 구조 및 기하학적 무결성을 유지하도록 훈련됨
• 지능형 모델: 장면 오브젝트와 의미를 지능적으로 분석하여 생생한 조명, 서브서피스 스캐터링 및 사실적인 재질 응답을 제공
• Granular 개발자 컨트롤: 크리에이티브 컨트롤은 구조, 톤 및 시맨틱 마스킹을 통해 신경 모델을 조정하여 아티스트 의도를 엄격하게 유지
• 간소화된 통합: NVIDIA Streamline 또는 Unreal Engine 5 플러그인을 통해 게임 개발자를 위한 빠르고 쉬운 통합 제공

DLSS 5는 렌더링 파이프라인을 교체하는 것이 아니라 확장합니다. DLSS 기술(Super Resolution, Multi Frame Generation 및 Ray Reconstruction)을 기반으로 구축하여 전체 그래픽 스택 전반에서 매끄럽게 작동하며, 래스터화, 레이 트레이싱 및 패스 트레이싱과 같은 기존 렌더링 방법을 향상시킵니다. 이러한 혁신은 수작업 렌더링과 뉴럴 그래픽을 결합하여 아티스트가 창의적 표현에 필요한 제어력을 유지하면서도 시각적 사실성을 획기적으로 도약시키는 변혁적인 시대의 시작을 알립니다.

NBA 2K27에서 DLSS 5를 경험하려면 게임을 다운로드하고 NVIDIA App에서 최신 GeForce Game Ready 드라이버를 다운로드하거나 GeForce NOW에서 플레이하세요. 또한 향후 몇 주 및 몇 달 동안 더 많은 타이틀들이 DLSS 5를 지원할 예정이므로 GeForce.com에서 향후 발표 내용들을 확인하세요.