DLSS 5 выглядит как генеративный AI-фильтр для видеоигр, работающий в реальном времени

Подробности

Поделиться подарок Nvidia анонсировала DLSS 5 в понедельник во время конференции GTC, и, судя по первым реакциям, это будет вызывающее разногласия обновление, причем некоторые критики назвали его «отстойным», который неприемлемо меняет художественный замысел. Генеральный директор Nvidia Дженсен Хуанг называет это «моментом GPT для графики — сочетание ручного рендеринга с генеративным искусственным интеллектом, чтобы обеспечить резкий скачок в визуальном реализме, сохраняя при этом контроль, необходимый художникам для творческого самовыражения».

В играх, поддерживающих DLSS 5, эти инструменты могут сразу же заметно улучшить освещение и тени, но в отличие от предыдущих версий масштабирования, которые использовали машинное обучение для устранения разрыва между высокими и низкими настройками графики, в этой версии применяется генеративный искусственный интеллект для переработки освещения и материалов с добавлением новых деталей. Примеры, показанные Nvidia сегодня из Resident Evil Requiem, Starfield, Hogwarts Legacy и EA Sports FC, выглядят более реалистично, да, но версии DLSS 5 имеют изменения, похожие на обновления «ИИ-отстой», которые мы видели применительно к фотографии, видео и другим творческим начинаниям.

По словам Nvidia, "модель искусственного интеллекта обучена для понимания сложной семантики сцены, такой как персонажи, волосы, ткань и полупрозрачная кожа, а также условий окружающего освещения, таких как передний или задний свет или пасмурная погода - и все это путем анализа одного кадра. Затем DLSS 5 использует свое глубокое понимание для создания визуально точных изображений, которые обрабатывают сложные элементы, такие как подповерхностное рассеяние на коже, нежный блеск ткани и взаимодействие света и материала на волосах, сохраняя при этом структуру и семантику оригинала. сцена».

Наиболее заметное влияние заключается в том, что DLSS 5, похоже, вносит существенные изменения в внешний вид моделей персонажей. В случае с «Реквиемом» генеративный искусственный интеллект, вставленный поверх исходных ресурсов, заставляет главную героиню Грейс Эшкрофт выглядеть совершенно по-другому, как будто она использовала фильтр Instagram, который сделал ее губы более полными, и нанесла интенсивные тени для век.

Его применение в Starfield дает столь же невероятные результаты, как будто резкость установлена ​​на максимум, и яркие блики, благодаря которым их черты лица и волосы выглядят освещенными на сцене, несмотря на то, что они находятся в помещении, где нет такого освещения. Nvidia цитирует Тодда Ховарда, руководителя студии Bethesda Game Studios, который говорит: "Когда NVIDIA показала нам DLSS 5 и мы запустили ее в Starfield, было удивительно, как она воплотила ее в жизнь. Мы играли в нее. Мы не можем дождаться, когда вы все тоже сделаете то же самое".