Нvidia объявляет о DLSS 3.5 с восстановлением лучей, повышая качество RT с помощью обученного на искусственном интеллекте шумоподавителя.

Nvidia announces DLSS 3.5 with ray tracing restoration, improving RT quality with AI-trained noise reduction.

Gamescom 2023 начался – как вы могли заметить – и Nvidia представила DLSS 3.5, новую версию DLSS, которая добавляет “восстановление лучей” – фактически, искусственно настроенное устранение шумов, улучшающее качество эффектов трассировки лучей на графических картах RTX. Компания также анонсировала новый ремастер-проект сообщества легендарной Half-Life 2, новые игры с DLSS 3 и Reflex и многое другое.

Давайте сначала рассмотрим новости о DLSS 3.5, потому что это увлекательно. Критическая информация состоит в том, что трассировка лучей в реальном времени основана на относительно небольшом количестве лучей, которые бросаются – определенно гораздо меньше, чем один луч на пиксель – поэтому у нас нет полной картины “истинной правды”, у нас есть изображение с присутствующей и шумом. Это означает, что требуется шаг удаления шума, чтобы заполнить отсутствующие пиксели, используя методы, такие как временная аккумуляция и пространственная интерполяция, чтобы сгенерировать более качественное окончательное изображение.

До сих пор все как обычно. Обычно эти устранители шумов настраиваются вручную, но нововведение состоит в том, что Nvidia обучила искусственную нейронную сеть (на пять раз большем объеме данных, чем использовалось для обучения DLSS 3), которая может достичь лучших результатов. Она может использовать разные методы с различными эффектами трассировки лучей, распознавать хорошие пиксели и отбрасывать плохие пиксели, а также сохранять высокочастотные детали, которые обычно размываются при масштабировании.

Вот официальное видео Nvidia, демонстрирующее новый пакет DLSS 3.5 и восстановление лучей в игре Cyberpunk 2077.

Кроме улучшения достоверности изображения, Nvidia утверждает, что замена нескольких шагов удаления шума одной обученной моделью искусственного интеллекта также может привести к незначительному увеличению производительности. Они показали пример (в видео выше), где включение восстановления лучей позволило Cyberpunk 2077 увеличиться с ~104 до ~112 кадров в секунду. Однако в целом следует ожидать производительности, “примерно одинаковой” при включенной функции.

Следует отметить, что этот новый устранитель шумов требует дополнительной информации из игры для работы, поэтому он должен быть добавлен разработчиками для каждой конкретной игры, а не является универсальным улучшением для всех существующих игр с трассировкой лучей.

Однако восстановление лучей выполняется на тензорных ядрах графических карт Nvidia, поэтому, в отличие от генерации кадров, эта функция будет доступна на графических картах серии RTX 20 и 30, а также на самых последних графических процессорах 40-й серии от Nvidia.



Сначала восстановление лучей добавляется в игры с трассировкой пути, так как они показывают наибольшую пользу, поскольку они полностью используют эффекты трассировки лучей. В этот список входят Phantom Liberty – дополнение к Cyberpunk 2077, Portal с поддержкой RTX и Alan Wake 2 – о последнем мы до сих пор не знали, что это игра с трассировкой пути. Конечно, у Remedy есть хороший опыт, поскольку Control 2019 года остается одним из лучших демонстраций трассировки лучей, поэтому видеть, как они применяют трассировку пути, имеет смысл. (Трейлер Alan Wake 2 с DLSS 3.5 должен выйти сегодня в 16:00 по времени Великобритании с большим количеством кадров из игры и ее графических технологий.)

Первые игры с DLSS 3.5 должны появиться “осенью”. Кроме того, три инструмента для создания контента – Chaos Vantage, D5 Render и Nvidia Omniverse – также интегрируют восстановление лучей для улучшения предварительных изображений.

Для получения более подробной информации о том, как работает восстановление лучей (и трассировка лучей в целом), стоит прочитать статью о DLSS 3.5 от Nvidia.

В другой части их презентации Nvidia также анонсировала Half-Life 2 RTX, сообщественный проект, использующий RTX Remix для пересоздания знаменитой игры Half-Life 2 с обширным списком технологий, включая полноценную трассировку лучей, DLSS 3, Reflex и RTX IO, на основе современных активов.

Игра уже выглядит фантастически благодаря работам нескольких команд моддинга Half-Life, объединенных в новую группу под названием Orbifold Stuidos, но, безусловно, Nvidia надеется, что анонс проекта привлечет больше волонтеров. Если вас заинтересовало, вы можете посетить сайт Half-Life 2 RTX от Nvidia.

В других новостях было объявлено о генерации кадров DLSS 3 для Call of Duty: Modern Warfare 3, Payday 3 и Fortnite, при этом MW3 и Payday 3 также получат функцию Reflex для уменьшения задержки. По метрикам Nvidia, 90 процентов пользователей GeForce Experience включают Reflex, когда она предлагается – хотя она часто включена по умолчанию – что делает ее гораздо более популярной функцией, чем трассировка лучей или даже DLSS, которые имеют более очевидные недостатки в зависимости от выбранных настроек производительности или качества изображения.

Вот ролик о продолжающемся проекте Half Life 2 RTX.

Nvidia также заявила, что игры Xbox PC Game Pass будут доступны на GeForce Now с этого четверга (24 августа), а также подробно рассказала о своих усилиях в области ИИ-нпс, включая ‘NeMo SteerLM’, который позволяет персонажам реагировать более реалистично – слайды Nvidia показывают персонажей с ползунками для творчества, юмора и токсичности.

Будет интересно увидеть первые игры с DLSS 3.5 в деле, поэтому оставайтесь на связи, чтобы узнать впечатления и анализ, когда у нас будет возможность это проверить.

Улучшения в качестве выглядят впечатляюще, и будет интересно увидеть, будет ли использован тот же обученный ИИ-денойзер, что и в предыдущих версиях RT – например, Control может выглядеть потрясающе…