Что такое DLSS 3.5 на базе искусственного интеллекта от Nvidia и как он работает?

Ключевые выводы

• DLSS 3.5 — это модернизация технологии DLSS от Nvidia, использующая искусственный интеллект для генерации пикселей более высокого качества для сцен с трассировкой лучей, уменьшения артефактов и повышения качества изображения.
• В DLSS 3.5 представлена ​​Ray Reconstruction — алгоритм шумоподавления на базе искусственного интеллекта, который обучается на миллионах высококачественных изображений для генерации более точных пикселей.
• Преимущества DLSS 3.5 включают улучшенное качество изображения, повышенную производительность в играх с трассировкой лучей, более широкую совместимость со всеми графическими процессорами серии RTX и расширенные возможности для творчества в приложениях для 3D-редактирования. Доступно осенью 2023 года.

Технология Nvidia DLSS изменила правила игры для геймеров, которые хотят воспользоваться преимуществами трассировки лучей, не жертвуя при этом производительностью. DLSS означает Deep Learning Super Sampling и использует искусственный интеллект для повышения качества изображений с более низким разрешением до более высоких с минимальной потерей качества.

DLSS развивается с момента своего дебюта в 2018 году, а версия DLSS 3.5 2023 года обещает обеспечить еще лучшие результаты для игр и приложений с трассировкой лучей. Читайте дальше, чтобы узнать, что такое DLSS 3.5, как он работает и что он значит для вас как геймера или создателя.

Что такое DLSS 3.5?

DLSS 3.5 — это эволюция технологии Nvidia DLSS 2023 года. Он представляет новую технику реконструкции лучей, которая использует искусственный интеллект для генерации пикселей более высокого качества для сцен с трассировкой лучей.

Трассировка лучей — это метод, который имитирует поведение света в реальном мире, создавая реалистичные тени, отражения и глобальное освещение. Однако трассировка лучей требует больших вычислительных ресурсов и требует огромной вычислительной мощности вашей видеокарты. Вот почему Nvidia представила DLSS, который использует искусственный интеллект для повышения разрешения изображений с более низким разрешением до более высокого разрешения, сохраняя или улучшая качество изображения.

DLSS 3.5 идет дальше, используя искусственный интеллект для восстановления отсутствующих или зашумленных пикселей в сценах с трассировкой лучей. В отличие от предыдущих версий DLSS, в которых для каждого прохода освещения использовались настраиваемые вручную шумоподавители, DLSS 3.5 использует одну нейронную сеть, которая может генерировать пиксели более высокого качества для любого прохода освещения. Это означает, что DLSS 3.5 может уменьшить такие артефакты, как неточности цвета, неточное освещение и двоение изображения, которые иногда возникают при трассировке лучей.

Как работает DLSS 3.5? Что такое лучевая реконструкция?

DLSS 3.5 сочетает в себе лучшие функции предыдущих версий DLSS, а также представляет новую технику под названием Ray Reconstruction. Реконструкция лучей — это новый способ использования искусственного интеллекта для улучшения качества трассировки лучей за счет генерации пикселей более высокого качества из пикселей более низкого качества.

Трассировка лучей работает путем направления лучей света от камеры на сцену и расчета того, как они взаимодействуют с объектами и материалами на сцене. Каждый луч представляет собой пиксель на экране, и чем больше лучей, тем точнее и детальнее получаются световые эффекты.

Однако для испускания большего количества лучей также требуется больше вычислительной мощности, что может снизить производительность и разрешение. Чтобы преодолеть этот компромисс, трассировка лучей обычно использует меньше лучей, чем пикселей на экране, а затем использует алгоритмы шумоподавления для заполнения недостающих пикселей путем усреднения или интерполяции соседних пикселей.

Алгоритмы шумоподавления в некоторых случаях могут дать хорошие результаты, но также могут приводить к появлению таких артефактов, как размытие, растекание цветов или двоение изображения. Эти артефакты могут снизить реализм и погружение в игры с трассировкой лучей.

Ray Reconstruction — это алгоритм шумоподавления на базе искусственного интеллекта, который использует глубокую нейронную сеть для генерации пикселей более высокого качества из пикселей более низкого качества. В отличие от обычных шумоподавителей, которые используют настроенные вручную правила или эвристику для заполнения недостающих пикселей, Ray Реконструкция использует подход, основанный на данных, который учится на миллионах примеров высококачественных изображений. с помощью трассировки лучей.

Он анализирует каждый пиксель на экране и сравнивает его с соответствующим лучом в сцене. Затем он использует информацию луча для восстановления более точного пикселя, который соответствует цвету, яркости и направлению источника света.

Каковы преимущества DLSS 3.5?

Старые версии DLSS выгодно конкурируют в масштабирование сравнения. Однако он предлагает еще больше преимуществ для геймеров и авторов, которые используют трассировку лучей в своих играх и приложениях. Вот некоторые из них:

• Улучшенное качество изображения: DLSS 3.5 может создавать изображения более высокого качества, чем DLSS 3 используя больше данных и более совершенную сеть искусственного интеллекта. DLSS 3.5 также может сохранять больше деталей и избегать артефактов, которые могут возникать при трассировке лучей, таких как неточное освещение, искажение цвета или шум.
• Повышенная производительность: DLSS 3.5 может повысить частоту кадров и разрешение игр с трассировкой лучей за счет снижения нагрузки на графический процессор и эффективного масштабирования изображения. DLSS 3.5 также может обеспечить больший выигрыш в производительности для игр с трассировкой пути, которые используют трассировку лучей для все аспекты сцены, такие как тени, отражения, преломления, глобальное освещение и окружающее освещение. окклюзия.
• Расширенная совместимость: DLSS 3.5 будет работать со всеми графическими процессорами серии RTX, а не только с новейшими графическими процессорами серии RTX 40. Это означает, что больше геймеров смогут воспользоваться преимуществами DLSS 3.5 в своих любимых играх с трассировкой лучей.
• Расширенное творчество: DLSS 3.5 также будет доступен для авторов, которые используют трассировку лучей в своих приложениях для 3D-редактирования, таких как Chaos Vantage, D5 Render и Nvidia Omniverse. DLSS 3.5 поможет им создавать более качественные и точные предварительные просмотры в этих приложениях, экономя время и ресурсы.

Как видите, DLSS 3.5 представляет собой комплексное обновление DLSS 3.

Когда будет доступен DLSS 3.5?

Nvidia сообщает, что DLSS 3.5 будет доступен осенью 2023 года, но конкретную дату пока не назвала. Nvidia также не раскрыла, какие игры будут поддерживать DLSS 3.5 при запуске, но мы можем ожидать некоторых будущих обновлений. игры, использующие трассировку лучей или пути, такие как Cyberpunk 2077 и Alan Wake 2, будут одними из первых.