NVIDIA анонсировала DLSS 4 Design

NVIDIA опубликовала исследовательскую работу по DLSS версии 4, своей технологии рендеринга ИИ для производительности графики в реальном времени. Система объединяет достижения в генерации кадров, реконструкции лучей и сокращении задержек. Флагманская функция многокадровой генерации генерирует три дополнительных кадра для каждого собственного кадра. Позднее DLSS 4 быстро предоставляет пользователю самые красивые кадры, чтобы они выглядели как настоящий рендеринг. В основе DLSS 4 лежит переход от сверточных нейронных сетей к моделям трансформаторов. Эти новые архитектуры ИИ превосходно улавливают пространственно-временные зависимости, улучшая качество трассировки лучей на 30-50% согласно тестам NVIDIA. Технология обрабатывает каждый сгенерированный ИИ кадр всего за 1 мс на графических процессорах RTX 5090 — значительно быстрее 3,25 мс, требуемых DLSS 3. В соревновательных играх новая функция Reflex Frame Warp сокращает задержку ввода до 75%, достигая 14 мс в THE FINALS и менее 3 мс в VALORANT, согласно собственным тестам NVIDIA.

Реализация DLSS 4 использует возможности архитектуры Blackwell, включая тензорные ядра FP8 и объединенные ядра CUDA. Оптимизированный конвейер включает в себя вертикальное слияние слоев и оптимизацию памяти, что позволяет контролировать вычислительные издержки, несмотря на использование моделей transformer, которые в два раза больше предыдущих реализаций CNN. Эта эффективность обеспечивает производительность в реальном времени даже при существенно более сложной обработке ИИ. Унифицированный конвейер ИИ снижает требования к ручной настройке для эффектов трассировки лучей, позволяя студиям внедрять расширенную трассировку пути в различных аппаратных конфигурациях. Дизайн также решает игровые задачи, такие как интерполяция быстро движущихся элементов пользовательского интерфейса и эффектов частиц, а также уменьшение артефактов в сценах с высоким движением. Аппаратный флип-измеритель NVIDIA и интеграция движка отображения, индуцированного Blackwell, обеспечивают точную синхронизацию кадров для вновь сгенерированных кадров для плавного игрового процесса с высокой частотой обновления и точной визуализацией.