Nvidia представила DLSS 5 на этой неделе, интегрировав технологию нейронного рендеринга в свой набор ИИ-инструментов для видеокарт. Компания заявила, что разработчики игр поддерживают новую технологию, однако реальность оказалась значительно сложнее – особенно после того, как художники из крупных студий увидели, что DLSS 5 делает с их работой.
Для демонстрации возможностей технологии были использованы Assassin's Creed Shadows и Resident Evil Requiem. Однако, как выяснилось, арт-команды Ubisoft и Capcom узнали о применении DLSS 5 к их играм одновременно с публикой. Один из разработчиков Ubisoft сообщил изданию Insider Gaming:
Мы узнали в то же время, что и все остальные.
Команда художников Capcom была особенно обеспокоена увиденным в трейлере Resident Evil, учитывая принципиальную позицию компании против использования ИИ в предыдущих играх серии.
Реакция индустрии не ограничилась студиями-разработчиками. Аниматор Майк Йорк, работавший над множеством игр, включая Death Stranding 2, провёл стрим с разбором превью DLSS 5 от Digital Foundry. Йорк останавливался на множестве моментов, указывая на радикальные изменения, которые нейронный рендеринг вносит в изображение.
В частности, Йорк обратил внимание, что при включённом DLSS 5 глаза Грейс Эшкрофт смотрят в разные стороны, на губах появляются несуществующие морщины, а форма уха полностью меняется. Но главная претензия аниматора глубже косметических артефактов.
Геометрия в компьютере не меняется. Вы играете в игру, и геометрия не изменяется – он прав. Но нужно быть осторожным с формулировками. Геометрия не меняется, но происходит следующее – поверх неё как бы рисуется новое изображение. Каждый отдельный кадр перерисовывается заново, и фактически настоящая геометрия больше не отображается.
По сути, новый алгоритм DLSS 5 использует генеративный ИИ для создания совершенно новых изображений, привязанных к оригинальным кадрам. Именно этим объясняются странные эстетические расхождения и изменения деталей фоновых объектов – технология не улучшает картинку, а фактически перерисовывает её.
Nvidia утверждает, что разработчики сохраняют контроль над интенсивностью работы модели. В ответ на запрос о деталях этих инструментов компания заявила:
Работа DLSS 5 уважает художественный замысел. Кроме того, разработчикам предоставляются детальные настройки, такие как интенсивность и цветокоррекция.
Художники могут использовать эти инструменты для регулировки глобального контраста, насыщенности и гаммы, а также определять, где и как применяются улучшения для сохранения уникальной эстетики игры. Разработчики также могут маскировать отдельные объекты или области, исключая их из обработки.
Digital Foundry признала ошибку в освещении DLSS 5 и пообещала быть внимательнее
Аниматор GTA 5 и Death Stranding 2 раскритиковал DLSS 5 за изменение внешности персонажей до неузнаваемости
Судя по комментарию Nvidia, художники и разработчики смогут защищать определённые ассеты от вмешательства алгоритма. Однако пока эти инструменты не продемонстрированы в деле, реальный объём контроля остаётся под вопросом.
До релиза DLSS 5 ещё далеко, но волна негатива оказалась настолько мощной, что глава Nvidia Дженсен Хуанг лично заявил, что критики технологии "ошибаются".
