Разбор DLSS 5 или как нейросети NVIDIA научились дорисовывать фотореализм в реальном времени

Разбор DLSS 5 или как нейросети NVIDIA научились дорисовывать фотореализм в реальном времени

На SIGGRAPH 2026 компания NVIDIA подробно рассказала об архитектуре DLSS 5 — технологии нейросетевого рендеринга под управлением 3D-геометрии (3D-Guided Neural Rendering), определяющей переход от симуляции к генеративной эволюции графики. На протяжении десятилетий индустрия наращивала реализм усложнением математических расчетов освещения, однако даже современный Path Tracing уткнулся в жесткие лимиты производительности.

В рамках своего выступления Эдвард Лю подробно объяснил, как новая эра объединяет физически точный рендеринг, задающий фундамент сцены, с компактными диффузионными нейросетями, генерирующими финальный фотореалистичный вид в реальном времени. Главным акцентом доклада стал абсолютный контроль в руках разработчиков: система не меняет авторский замысел, жестко фиксируя геометрию, позы и смысловые буферы, но при этом обогащает кадр физикой света, подповерхностным рассеиванием и глубокими материалами.

dlss 5 1 gpu

Эволюция графических технологий NVIDIA демонстрирует непрерывный поиск решений для совершения технологических прыжков, где каждый прорыв открывает новую кривую масштабирования реализма. Начиная с 2001 года, когда появление программируемых шейдеров на GeForce 3 заложило основу современной графики, компания последовательно меняла парадигму рендеринга. В 2006 году унифицированные шейдеры на архитектуре GeForce 8800 GTX задали новые стандарты гибкости вычислений, а в 2018 году запуск трассировки лучей и первого поколения DLSS на RTX 2080 Ti объединил классический рендеринг с искусственным интеллектом. К 2025 году связка полноценной трассировки путей (Path Tracing) и DLSS 4 на флагманах уровня RTX 5090 подтолкнула индустрию к пределу возможностей традиционных физических расчетов. Однако достижение абсолютного фотореализма в реальном времени требует перехода на следующую кривую, которой и становится DLSS 5.

dlss 5 2 gpu

Современная графика реального времени строится на строгих физических принципах, где изображение формируется последовательно от сцены к финальному кадру. В рамках этой цепочки разработчики сначала задают геометрию сцены, затем накладывают PBR-текстуры, рассчитывают поведение света с помощью трассировки путей и фиксируют результат виртуальной камерой с точной регулировкой параметров. Каждый пиксель в таком подходе появляется строго в результате явных физических расчетов или предустановленных художником правил. Несмотря на высокую точность управления, данный метод сталкивается с высокой вычислительной стоимостью при попытке воспроизвести мельчайшие нюансы физического мира, такие как рассеивание света внутри кожи или сложные микротекстуры.

dlss 5 3 gpu

Чтобы преодолеть ограничения традиционного рендеринга, NVIDIA предлагает объединить классическую физику с возможностями генеративных нейросетей, берущих на себя генерацию фотореалистичных деталей. В стандартной генеративной модели синтез изображений происходит на основе датасета и длительного обучения, выдавая глубоко детализированную картинку, но без прямого контроля над геометрией и объектами. DLSS 5 совмещает оба подхода: графический движок продолжает точно выстраивать геометрию и освещение сцены, после чего обученная генеративная модель обогащает полученный кадр визуальными подробностями. Это позволяет сохранить точный контроль над положением объектов и камеры, одновременно получая органический фотореализм, который ранее требовал колоссальных ресурсов.

dlss 5 4 gpu

Главная сложность использования генеративных моделей в играх заключается в их вероятностной природе, так как одинаковый набор вводных данных может давать разный визуальный результат. При использовании абстрактных текстовых промптов, раскадровок, референсов или 3D-прокси модель склонна импровизировать, меняя внешность персонажей или детали окружения от кадра к кадру. В офлайн-генерации видео это допустимо, но для интерактивного рендеринга в реальном времени подобная нестабильность неприемлема. Чтобы исключить случайные изменения и сохранить идентичность объектов, генерация должна быть жестко ограничена конкретным исходным состоянием, не оставляя нейросети пространства для произвольных интерпретаций.

dlss 5 5 gpu

Решением проблемы вариативности стал подход, в котором базовый срендеренный кадр выступает жестким фундаментом для работы нейросети. Вместо использования внешних текстовых запросов или эскизов DLSS 5 опирается на исходный кадр игры, извлекательный из него смысловые данные: идентичность и силуэт персонажа, семантику сцены и материалов, направление и настроение освещения, а также точные параметры камеры. Входной кадр предоставляет нейросети исчерпывающий контекст, благодаря чему генеративный блок лишь обогащает визуальное восприятие, оставляя геометрию, позиционирование и художественную композицию неизменными.

dlss 5 6 gpu

Первый ключевой вызов при создании DLSS 5 заключался в сохранении художественного замысла авторов и предотвращении искажения важных деталей. Нейросеть обучена уважать намерение разработчиков за счет использования внутренних буферов рендерера, таких как альбедо, нормали поверхностей и данные об освещении. Эти параметры блокируются, гарантируя неизменность идентичности объектов, позы персонажей, общей структуры сцены и кинематографического движения. Внутри этих строгих рамок модель получает свободу улучшать подповерхностное рассеивание света, физические свойства материалов, передачу света сквозь волосы и сложную затененность, не меняя при этом ключевые элементы вроде шрамов, одежды или важных деталей окружения.

dlss 5 7 gpu

Вторым фундаментальным барьером стала необходимость обеспечения потоковой обработки кадра за кадром без задержек и временных артефактов. В отличие от стандартных видеогенераторов, работающих с пакетами кадров и анализирующих сцену в обе стороны по времени, интерактивный рендеринг требует мгновенного отклика на действия игрока. DLSS 5 интегрируется непосредственно в пайплайн движка и использует векторы движения для последовательной обработки кадра за кадром в реальном времени. Входной кадр Render T немедленно трансформируется моделью DLSS 5 и выводится на экран как Display T, обеспечивая временную стабильность без мерцаний и не требуя заглядывания в будущие кадры.

dlss 5 8 gpu

Третий масштабный вызов был связан с жестким временным бюджетом при работе с высоким разрешением 4K, содержащим более 8 миллионов пикселей. Обычные генеративные модели слишком велики и медленны для запуска внутри игрового цикла, поэтому NVIDIA дистиллировала знания гигантских баз данных в компактную модель диффузионного трансформатора, выполняющую задачу за один шаг. Эта сфокусированная нейросеть лишена способности генерировать произвольные изображения с нуля, но идеально выполняет одну функцию — делает срендеренный кадр реалистичным. Благодаря оптимизации DLSS 5 работает на одной видеокарте с высокой частотой кадров, низкой задержкой и эффективным использованием видеопамяти.

dlss 5 9 gpu

Для того чтобы технологии не ограничивали творческое видение, разработчикам предоставлен полный набор инструментов контроля над финальным изображением. Панель DLSS 5 Developer Controls позволяет гибко выбирать профили нейросети под конкретные задачи, регулировать глобальную интенсивность структуры и тона, а также применять автоматическое или ручное маскирование отдельных ассетов. Художники могут изолированно настраивать степень нейросетевой обработки для персонажей, посуды, фруктов или элементов декора, сохраняя полный контроль над настроением кадра и не допуская произвольного изменения важных предметов.

dlss 5 10 gpu

Гибкость настройки DLSS 5 проявляется в возможности комбинирования глобальных параметров и специализированных моделей прямо во время работы сцены. Регулировка параметров Structure Intensity и Tone Intensity позволяет плавно варьировать результат — от строгой привязки к базовому рендеру до максимального раскрытия генеративных эффектов вроде глубокого рассеивания света и мягких теней. Выбор предустановленных весов (Model A, B или C) позволяет адаптировать визуальный стиль под конкретные локации или кат-сцены, гарантируя, что искусственный интеллект остается послушным инструментом в руках арт-директора, а не заменяет собой художественную работу.

dlss 5 11 gpu

Наглядной иллюстрацией гибкости архитектуры DLSS 5 служит прямое сравнение работы различных предварительно обученных нейросетевых моделей при одинаковом уровне структуры (Structure Intensity 80%). Как можно заметить на портрете персонажа, модель A фокусируется на мягких светотеневых переходах и естественном выравнивании тонов кожи, придавая образу кинематографическую мягкость. Модель B добавляет выразительный контраст и задействует более глубокую проработку складок, микрорельефа и мелких морщин, визуально делая персонажа старше и фактурнее. Модель C выдерживает баланс между микрогеометрией и естественной световой передачей, сохраняя мягкость кожи, но усиливая акценты на контурах лица и головного убора. Такая вариативность означает, что разработчики не привязаны к единственному алгоритму улучшений, а могут подбирать характер нейросетевой генерации в соответствии с художественным стилем конкретного проекта или сцены.

dlss 5 12 gpu

Для реализации максимально точного художественного контроля DLSS 5 задействует ручную или автоматическую сегментацию объектов сцены прямо из игрового движка. Разработчикам доступно выделение индивидуальных масок для любых ассетов — будь то кувшин, виноградная гроздь или стеклянные бутыли на столе. Каждой такой изолированной зоне можно настраивать собственные параметры Structure Intensity и Tone Intensity без затрагивания остального кадра. К примеру, если фоновые предметы требуют нейтральной нейросетевой обработки, то центральные элементы натюрморта можно усилить на 100%, добившись идеального преломления света сквозь цветное стекло и естественно матовой, наливной текстуры на ягодах винограда.

dlss 5 13 gpu

В конечном итоге панель инструментов DLSS 5 Developer Controls объединяет три ключевых столпа управления генерацией: выбор предустановленной модели (Models), регулировку интенсивности обработки (Intensity) и пространственное маскирование (Masking). Подобная гибкость полностью снимает опасения, что искусственный интеллект начнет бесконтрольно переписывать графику на свое усмотрение или искажать задумку авторов. Разработчики определяют не только то, насколько глубоко нейросеть внедряется в геометрию и освещение кадра, но и гибко распределяют эту нагрузку по ключевым акцентам сцены. Более того, архитектура DLSS 5 проектируется с заделом на будущее, закладывая базу под появление еще более глубоких средств прямой арт-дирекции (Future Controls) в последующих версиях SDK.

dlss 5 14 gpu

Чтобы точнее понять роль DLSS 5 в современном рендеринге, NVIDIA классифицирует все графические ИИ-технологии по трем ключевым категориям: реконструкция (Reconstruction), аппроксимация функций (Function Approximation) и генерация (Generation). К реконструкции относятся базовые модули DLSS, работающие с недостающими пикселями и светом — Super Resolution, Ray Reconstruction и Frame Generation. Аппроксимация функций представлена решениями вроде Neural Radiance Cache и Neural Materials, которые замещают тяжелые физические математические уравнения сжатыми нейросетевыми весами. DLSS 5 открывает совершенно новую, третью веху — 3D-Guided Neural Rendering, где нейросеть обогащает финальное изображение на основе трехмерного рендера, превращая художественную дирекцию разработчика в конечный эталон качества.

dlss 5 15 gpu

Внедрение 3D-управляемого нейросетевого рендеринга окончательно достраивает исторический график масштабирования графических технологий NVIDIA, отмечая 2026 год как начало новой эпохи. Если с 2001 по 2025 год индустрия прошла путь от первых программируемых шейдеров GeForce 3 и унифицированной архитектуры GTX 8800 до трассировки лучей с DLSS 1 на RTX 2080 Ti и полномасштабного Path Tracing с DLSS 4 на RTX 5090, то DLSS 5 взмывает вверх по новой, практически экспоненциальной кривой. Потенциал традиционного симуляционного рендеринга выжимается до максимума, но именно переход к генеративной интеграции позволяет совершить качественный рывок к фотореализму, не упираясь в жесткие вычислительные лимиты физического просчета света.

dlss 5 16 gpu

На общем спектре генеративных ИИ-технологий DLSS 5 занимает строго отведенное место, находясь на противоположном полюсе от интерактивных базовых видеомоделей (Interactive Foundational Video Models). В то время как классические видеогенераторы обладают высокой свободой творчества, они требуют колоссальных ресурсов, работают с задержкой и генерируют непредсказуемый результат. DLSS 5, напротив, оптимизирована под сверхжесткие привязки (Tight Grounding): она работает исключительно каузально (одновременно с потоком ввода), в реальном времени, с минимальными задержками и в честном 4K-разрешении. Это инструмент прямого действия для видеоигр, гарантирующий полную синхронизацию нейросетевой генерации с игровым процессом и физикой виртуального мира.

Рассмотрим сравнение графики с DLSS 5 и без:

 

Сравнение девушки демонстрирует работу технологии на крупных планах: при отключенной нейросети изображение выглядит плоским, кожа кажется слишком гладкой и синтетической, а стеганая тканевая одежда теряет отчетливую глубину. Активация DLSS 5 кардинально преображает кадр — на лице появляется естественное подповерхностное рассеивание света, кожа обретает реалистичную микротекстуру с мягкими светотеневыми переходами, а ткань костюма получает выраженную фактуру и точные контактные тени.

 

Сравнение сложного натюрморта со множеством предметов на столе и кустами роз на фоне показывает, как алгоритмы справляются с разнородными материалами. Без нейросети металлические кувшины, чаши и фрукты смотрятся утилитарно, а цветы на заднем плане сливаются в единую темную массу. При включении DLSS 5 металл обретает глубокие сложные отражения, поверхности начинают правдоподобно взаимодействовать со светом, а бутоны и листья роз получают мягкую подсветку, придающую всей композиции объём.

 

Сравнение торговца в тюрбане на фоне прилавка акцентирует внимание на проработке персонажей и украшений. В исходном рендере складки ткани и массивное деревянное ожерелье выглядят упрощенно, а кожа лица лишена выразительных деталей. Активация DLSS 5 добавляет кадру кинематографичности: тканевый тюрбан обретает естественную мягкость, кожа насыщается естественным рельефом и мимическими чертами, а украшения начинают достоверно взаимодействовать со сценой за счет улучшенных контактных теней.

 

Сравнение густой растительности и вьюнов вокруг старинных каменных арок и бочек иллюстрирует работу с невероятно сложной и плотной геометрией. Без нейросети кустарники кажутся пластмассовыми, с жесткими и некорректно затененными краями листьев. Включение DLSS 5 «оживляет» сцену, выстраивая физически корректный проход света сквозь полупрозрачную листву, за счет чего зелень приобретает объём, а вся локация — естественную глубину и реалистичную игру света и тени.

dlss 5 17 gpu

Итоговая концепция DLSS 5 — 3D-Guided Neural Rendering — сводится к гармоничной триаде: симуляция создает физически точную базу мира, заземленная генерация насыщает ее кинематографическим фотореализмом, а авторский контроль художника направляет итоговый результат. Технология не заменяет классический графический конвейер, а органично расширяет его, доводя до совершенства детализацию растений, материаловедение, сложное поведение света на лице персонажей и натюрмортах. NVIDIA официально подтвердила, что релиз этого революционного инструментария состоится уже этой осенью, открывая разработчикам по всему миру доступ к следующему поколению графики.

Детальный разбор DLSS 5 на SIGGRAPH 2026 доказал, что искусственный интеллект создан не для замены классического конвейера, а для его колоссального расширения. Пройдя путь от простых апскейлеров и генераторов кадров до полноценных нейросетевых симуляторов, NVIDIA сформировала инструмент, способный доводить детализацию любого интерактивного проекта до кинематографического уровня. Объединение гибких разработческих контроллеров, каузальной привязки к временному потоку и генеративных возможностей открывает перед художниками и арт-директорами неограниченные творческие горизонты. С выходом DLSS 5 этой осенью грань между предварительно отрендеренными роликами и реальным игровым процессом окончательно стирается.

ЦЕНТР ОБСУЖДЕНИЙ

@GameGPU_com

Присоединяйтесь к обсуждению, делитесь результатами своих бенчмарков и спорьте о производительности железа в X.

Обсудить в X