На выставке CES 2025 вице-президент NVIDIA по исследованиям в области глубокого обучения Брайан Катанзаро рассказал журналистам о радикальных изменениях в технологии DLSS 4. В новой версии разработчики полностью переработали подходы к Super Resolution, Ray Reconstruction и Frame Generation.
По словам Катанзаро, в основе Super Resolution и Ray Reconstruction теперь лежат трансформерные модели, пришедшие на смену сверточным нейронным сетям (CNN). Эти модели демонстрируют более высокий интеллект, способны обучаться на больших наборах данных и принимать более эффективные решения. Это позволило ощутимо уменьшить проблемы с мерцанием и появлением артефактов, характерные для предыдущих версий DLSS. Новая модель Super Resolution получила четырехкратное увеличение вычислительной мощности по сравнению с предшественницей.
Значительным изменениям подвергся и Frame Generation. NVIDIA отказалась от использования аппаратного ускорителя Optical Flow в пользу полностью ИИ-ориентированного решения. Катанзаро пояснил, что при разработке DLSS 3 компания была вынуждена использовать аппаратный ускоритель Optical Flow из-за недостаточной производительности тензорных ядер и отсутствия подходящего алгоритма для работы в реальном времени.
Аппаратная реализация алгоритма Optical Flow сильно ограничивала возможности для улучшений. Мы не могли исправить возникающие артефакты даже с помощью более продвинутой нейронной сети, пока не решили полностью заменить этот подход на решение на базе ИИ.
Новая система Frame Generation требует больше ресурсов тензорных ядер, но при этом использует меньше видеопамяти и обеспечивает более высокое качество изображения. Это особенно важно для режима Multi Frame Generation, доступного на новых видеокартах RTX 50.
На вопрос о возможности портирования новой технологии на видеокарты RTX 30 глава разработки DLSS ответил, что это в первую очередь вопрос оптимизации и инженерных решений.
Мы запускаем Frame Generation и Multi Frame Generation на серии RTX 50, но в будущем посмотрим, что можно выжать из более старого железа.
Катанзаро также рассказал о важных улучшениях в системе кадровой синхронизации, которая теперь меньше зависит от CPU, что позволило снизить вариативность времени кадра в 5-10 раз. Отдельно он отметил технологию Reflex 2 на базе ИИ, которая обеспечивает более тесную связь между игроком и игрой, что особенно оценят геймеры, чувствительные к задержкам ввода.
Официальный релиз видеокарт GeForce RTX 50 с поддержкой DLSS 4 состоится уже в этом месяце.
Источник новости: shazoo.ru
