Новые модели NVIDIA DLSS Super Resolution и Ray Reconstruction на базе архитектуры трансформер вышли из стадии бета-тестирования, сообщает VideoCardz со ссылкой на официальный GitHub репозиторий компании. Накануне в репозитории был опубликован исходный код набора инструментов для разработчиков (Software Development Kit, SDK) версии 310.3.0 и примеры, в архивах с которыми можно найти необходимое для ручного обновления библиотеки DLSS путём замены dll файла.
NVIDIA анонсировала крупное обновление набора технологий DLSS на выставке CES 2025 в начале этого года. Новые модели для масштабирования изображения (Super Resolution), реконструкции лучей (Ray Reconstruction) и сглаживания на базе глубокого обучения (Deep Learning Anti-Aliasing, DLAA) стали частью набора DLSS 4.
Предыдущие версии технологий DLSS полагались на свёрточные нейронные сети (Convolutional Neural Network, CNN), которые генерировали новые пиксели, используя информацию из локализованных областей текущих и предыдущих кадров. Компания достигла предела возможностей CNN, поэтому для дальнейшего развития DLSS потребовалась разработка новых моделей.
Новые модели на базе архитектуры трансформер более продвинуты, чем свёрточные модели. Они используют в два раза больше переменных и анализируют кадры полностью, оценивая важность каждого пикселя. Новые модели обладают более глубоким пониманием сцен, обеспечивают более стабильное изображение, снижая вероятность появления мерцания, ореолов и прочих подобных артефактов, гарантируют лучшую детализацию во время движения, более высокую чёткость краёв объектов. Новая модель для реконструкции лучей также улучшает качество изображения в сценах со сложным освещением.
NVIDIA использовала свёрточные модели более шести лет, теперь, после почти шести месяцев бета-тестирования, компания заложила фундамент для дальнейшего развития технологий DLSS с моделями на базе архитектуры трансформер.