NVIDIA DLSS 5, 3D 기반 신경 렌더링 공개

ai.euno.news 자동 뉴스 요약

DLSS 5가 3D 기반 신경 렌더링을 앞세워 등장했다. NVIDIA는 9월 22일 자사 개발자 블로그를 통해 이 신기술을 소개하면서, 동시에 NVIDIA ACE와 RTX Kit 계열 도구인 RTX Mega Geometry 2.0 업데이트도 함께 공개했다.¹ 세 발표 모두 게임 개발자를 대상으로 한 것으로, 렌더링·캐릭터 AI·고밀도 지오메트리 처리라는 서로 다른 축을 각각 건드린다.

핵심은 DLSS 5에 새로 들어간 3D-Guided Neural Rendering이다. 기존 DLSS가 업스케일링과 프레임 생성에 집중했다면, 이번 기능은 게임 엔진이 렌더링한 프레임 자체를 신경망 처리의 마지막 단계로 확장하는 방식이다. 엔진이 만든 지오메트리, 텍스처, 라이팅 버퍼는 “바뀌지 않는 토대”로 고정되고, 그 위에 모델이 색상과 모션 벡터 정보를 참고해 조명과 재질의 디테일을 더한다. NVIDIA에 따르면 이 과정에서 장면 구조와 캐릭터 정체성, 원래의 아트 디렉션은 그대로 유지되도록 설계했다.

기술적으로는 프레임 한 장을 입력받아 한 장을 출력하는 결정론적 구조를 쓴다. 게임 엔진의 모션 벡터를 그대로 활용해 시간축 안정성을 확보하고, 별도의 경량 모델이 GeForce RTX 50 시리즈 GPU 한 장에서 최대 4K까지 로컬로 동작한다. 개발자에게는 여러 모델을 장면·게임플레이·컷신별로 섞어 쓸 수 있는 옵션과, 디테일 강도(Structure Intensity)와 색감 반응(Tone Intensity)을 따로 조절하는 컨트롤이 주어진다. 유리잔, 물방울, 식물 등 특정 오브젝트에만 효과를 적용하거나 배제하는 시맨틱 AI 마스킹, 엔진 레벨 마스크도 지원한다. NVIDIA는 래스터라이즈 그래픽에서도 효과가 나타나지만, 레이트레이싱이나 패스트레이싱으로 얻은 조명 정보를 입력으로 줄 때 결과 정확도가 크게 올라간다고 밝혔다.

실제 적용 사례로는 Visual Concepts가 개발하고 2K가 배급한 NBA 2K27이 꼽힌다. GeForce RTX 50 시리즈 데스크톱·노트북 GPU 전체에서 이미 DLSS 5를 지원하며, GeForce NOW Ultimate 구독자는 NVIDIA가 운영하는 RTX 5080 기반 클라우드 서버로 스트리밍할 때도 같은 기능을 쓸 수 있다. Visual Concepts는 전체 톤·스타일 컨트롤과 픽셀 단위 업리프트 마스크를 조합해, 스캔한 실제 선수 얼굴 형태는 건드리지 않으면서 피부의 서브서피스 스캐터링, 머리카락과 귀를 투과하는 빛, 접촉 그림자 같은 세부 표현만 끌어올렸다.

같은 발표에서 NVIDIA ACE도 음성·추론 모델 두 종을 새로 얹었다. 6억 파라미터 규모의 음성 인식 모델 Nemotron Speech 3.5 Streaming은 스트리밍 구조로 지연 시간을 줄이면서 정확도를 유지하도록 설계됐고, 마찬가지로 6억 파라미터인 텍스트음성변환 모델 Qwen3 TTS는 커스텀 파인튜닝을 지원한다. 이 모델들을 게임 그래픽과 나란히 로컬에서 구동하기 위한 통로로는 NVIDIA In-Game Inferencing(NVIGI) SDK가 쓰이며, 해당 SDK는 이번에 RTX Spark 지원을 개발자 프리뷰 형태로 추가했다.

자료에는 RTX Mega Geometry 2.0과 RTX Kit의 구체적인 신기능 목록까지는 포함돼 있지 않아, 이 부분은 제목과 개요 수준에서만 확인된다.

읽기 목록은 이 브라우저에 저장됩니다.