Чем отличается новая модель Transformer в NVIDIA DLSS 4 от предыдущей версии?

Некоторые отличия новой модели Transformer в NVIDIA DLSS 4 от предыдущей версии:

• Отказ от свёрточных нейросетей (CNN), которые анализировали соседние пиксели, чтобы восстановить недостающие детали в кадре. hdhai.com CNN обеспечивали высокую скорость работы, но часто приводили к ошибкам, например, к появлению артефактов или размытым краям. hdhai.com
• Переход на архитектуру Transformer, которая обрабатывает каждый пиксель кадра отдельно, оценивая его значение в контексте всей сцены. hdhai.com Это позволяет сохранять больше мелких деталей и выводить изображение на новый уровень. hdhai.com
• Увеличение количества параметров в алгоритме вдвое по сравнению с предыдущими версиями. hdhai.com Это привело к приросту производительности трассировки лучей на 30–50%. hdhai.com
• Сокращение задержек — на флагманской RTX 5090 задержки сократились с 3,25 мс до 1 мс. hdhai.com
• Улучшение качества изображения — например, уменьшение ореолов, мерцания, лесенки и гостинга. dzen.ru
• Возможность адаптивно обрабатывать сложные сцены — от отражений до движения волос и прозрачных эффектов. dzen.ru