Через несколько дней после выступления генерального директора NVIDIA Дженсена Хуанга (Jensen Huang) на выставке GTC 2026, специалисты компании представили презентацию о практическом применении нейронного рендеринга. Доклад был сосредоточен на технической части и охватывал такие вопросы, как изменения в конвейере рендеринга и внедрении в игры.
Источник изображения: NVIDIA; VideoCardz.com (и далее).
В отличие от недавно анонсированной технологии DLSS 5, которая является примером применения машинного обучения для изменения уже готового кадра, разрабатываемые технологии подразумевают внедрение небольших нейронных сетей непосредственно в конвейер рендеринга для декодирования текстур, обработки материалов и снижения нагрузки на память. Это небольшие нейронные движки для выполнения определённых задач.
Наиболее простым для понимания примером является технология нейронного сжатия текстур (Neural Texture Compression, NTC). В технической демонстрации под названием Tuscan Wheels переход от распространённого сегодня блочного сжатия (Block Compression, BCN) к нейронному сжатию NTC позволил снизить потребление видеопамяти от 6,5 ГБ до 970 МБ, сохранив качество, близкое к оригиналу. При одинаковом лимите видеопамяти 970 МБ нейронное сжатие сохраняет больше деталей, чем блочное. Выигрыш не только в меньшем потреблении видеопамяти, но и в меньшем объёме игровых данных, которые хранятся на диске, меньшем объёме загружаемых данных при скачивании игр и обновлений, большем количестве качественных ассетов, которые могут загрузиться в видеопамять одновременно.
Нейронные материалы (Neural Materials) придерживаются той же логики. Вместо хранения больших объёмов данных от математических расчётов функции BRDF (Bidirectional Reflectance Distribution Function), которая описывает, как свет отражается от поверхности, специалисты NVIDIA предлагают хранить эти данные в виде латентного представления и декодировать их с помощью небольшой нейросети. В рамках технической демонстрации этой технологии удалось повысить скорость рендеринга от 1,4 до 7,7 раз при разрешении 1080p.
Когда все эти технологии станут доступны разработчикам игр, не уточняется. Что касается DLSS 5, релиз может состояться осенью 2026 года.
