Содержание
При первом знакомстве с технологией Nvidia DLSS 2 с применением ИИ можно подумать, что это магия. Использование выделенных тензорных ядер в видеокартах GeForce RTX позволяет запускать поддерживаемые игры намного быстрее почти без потери качества графики. Теперь Nvidia использует эти же тензорные ядра в веб-видео с технологией RTX Video Super Resolution, которую представила на CES 2023.
RTX Video Super Resolution можно назвать не менее революционной технологией, чем DLSS. Если вы регулярно смотрите видео в интернете, это станет ещё одной причиной купить современную видеокарту Nvidia, а не AMD. Технологию поддерживают карты серий RTX 30 и RTX 40.
Что такое Nvidia RTX Video Super Resolution?
В конце февраля эта технология стала доступной владельцам названных выше видеокарт с появлением драйвера Nvidia Game Ready 531.14. После её активации в панели управления Nvidia она запускает любое видео в браузерах Chrome или Edge с помощью алгоритма искусственного интеллекта для радикального улучшения качества изображения.
Видео пропускается через алгоритм, смягчающий тёмные и чёрные участки, которые становятся размытыми и блочными. Далее берутся все высококонтрастные области, такие как элементы пользовательского интерфейса, и делаются чёткими. Окончательное изображение не похоже на нативное видео 4K, поскольку источником было 1080p, но оно станет выглядеть значительно лучше.
Внутри происходит кое-что ещё. Можно повышать не только 1080p до 4K. RTX Video Super Resolution может автоматически увеличивать широкий диапазон разрешений видео, от низкого 360p до 1440p. Он не масштабируется при фиксированных разрешениях, а подстраивается под размер окна. Видео с разрешением 480p будет увеличиваться до 1080p на экране с разрешением 1080p (в полноэкранном режиме) или где-то между 480p и 1080p, в зависимости от размера окна воспроизведения, говорит представитель Nvidia.
RTX Video Super Resolution работает как по волшебству
Первое знакомство с технологиями адаптивной синхронизации G-Sync и FreeSync могло впечатлить геймеров. Разница в ощущениях от игр была радикальной, но она плохо заметна на скриншотах, где показано статичное изображение. RTX Video Super Resolution напоминает эти технологии, но разницу можно увидеть и на статичных изображениях.
Попробовав RTX Video Super Resolution, вы уже не захотите возвращаться к стандартному веб-видео. Для тестов просматривались видео 1080p на мониторах 4K в браузерах Firefox (который не поддерживает VSR) и Chrome, чтобы увидеть разницу между 1080p и 4K с апскейлингом VSR в реальном времени. Можно сказать, что разница радикальная.
Главные отличия видны в видеороликах с чётким изображением 1080p с высоким битрейтом. Просмотр Holey Moley на Hulu и Drink Masters на Netflix с RTX Video Super Resolution Active был впечатляющим, даже при использовании самого низкого качества VSR (технология имеет четыре уровня качества с разным влиянием на производительность видеокарты). В Firefox видео 1080p в полноэкранном режиме выглядит размытым и блочным, растянутом на панели 4K. Включение VSR в Chrome исправляет это, давая чёткое, чистое изображение.
К сожалению, Netflix и Hulu не позволяют делать скриншоты из-за авторских прав. Удалось сделать несколько скриншотов трейлера Drink Masters на YouTube, которые показывают потенциал VSR, но достаточно блочное собственное изображение YouTube с низким битрейтом означает, что не получится увидеть полного волшебного эффекта RTX Video Super Resolution на приведённых ниже скриншотах.
Вот кадр из трейлера, представляющий конкурсантов. Желательно нажать правой кнопкой мыши на изображения и выбрать «Просмотреть изображение в новой вкладке», чтобы увидеть их в полном разрешении 4K. В исходном разрешении 1080p в Firefox видно много размытости и блочных неровных краёв.
Дальше то же самое в Chrome с включенной опцией высочайшего качества VSR. Большая часть размытия исчезла, а оставшееся можно отнести к стандартному размытию в движении. Края стали выглядеть невероятно чёткими, а повышенная чёткость помогает лучше выделяться цветам. Участники в ярких рубашках выглядят намного лучше, можно рассмотреть бутылки сзади и логотип Netflix в углу.
При ближайшем рассмотрении статичное изображение может показаться слишком чётким и сглаженным, с резкостью больше обычной. Это ощущение осталось от всех сделанных скриншотов. Несмотря на это, RTX Video Super Resolution в движении выглядит потрясающе по сравнению со стандартным веб-видео. Как и DLSS, VSR можно сравнивать по пикселям в отдельных кадрах, но в движении эффект выглядит выдающимся.
RTX Video Super Resolution заметно очищает игровое видео на YouTube и Twitch, но достаточно низкий битрейт слегка обесценивает эффект. Просмотр видео Stodeh Call of Duty: MW2 DMZ в целом выглядит лучше с активным VSR, но трудно устранить блочность и размытость, особенно в быстро движущихся сценах со сложным геймплеем. Однако, активировать VSR всё равно стоит.
У технологии есть пределы эффективности. Это показал трейлер Top Gun Maverick на YouTube с установленным вручную разрешением 480p (стандартное разрешение VHS) в полноэкранном режиме на мониторе 4K. Как и в случае с DLSS, тензорные ядра AI VSR могут столкнуться с трудностями в попытках масштабировать видео с крайне низким количеством собственных пикселей.
Вот скриншот нативного видео 480p в Firefox. Оно ожидаемо размыто, но так и должно быть.
Вот то же самое, улучшенное с помощью RTX Virtual Super Resolution. Откройте изображения в новой вкладке и посмотрите на правую сторону лица парня. Она выглядит даже более размытой, чем в Firefox 480p, а искусственный интеллект Nvidia значительно искажает щеку и даже форму глаза. Край линии роста волос также выглядит слишком резким. Использование VSR для преобразования видео с 480p в 4K выглядит даже хуже, чем в обычном режиме, как на скриншотах, так и в движении.
Ещё не все потеряно. Вот те же 480p, увеличенные до 1080p. Этот гораздо более умеренный рост разрешения приводит к более чёткому изображению, давая улучшение визуального качества, как в Drink Masters и Holey Moley с 1080p до 4K. Все ранее замеченные искажения ИИ исчезли, трейлер выглядит фантастически в движении.
Если использовать его с умом, RTX Virtual Super Resolution изменит правила игры. Если же перестараться, всё может пойти не по плану. К счастью, наверняка большинство пользователей не будут слишком часто масштабировать видео с 480p до 4K.
Влияние разрешения RTX Video Super Resolution на производительность
Технология использует графический процессор видеокарты Nvidia RTX и его ядра для достижения своих эффектов. Это может снизить скорость отображения игр. Проблема может возникнуть только в том случае, если вы одновременно играете и смотрите видео. Тогда RTX VSR приведёт к резкому падению производительности, так что лучше не стоит делать это одновременно.
Nvidia предлагает четыре уровня качества с VSR, с разной визуальной эффективностью и влиянием на производительность. Уровень 1 самый слабый (но всё равно даёт значительный прирост визуального качества), а уровень 4 — самый высокий. Для анализа разных уровней просматривалось видео Stodeh с открытым диспетчером задач Windows 10, чтобы понять нагрузку на видеокарту.
Эта нагрузка может варьироваться в зависимости от сложности масштабируемой сцены, но в целом результаты следующие:
- RTX VSR выключен — загрузка графического процессора от 4 до 33%, в основном 17-19%.
- VSR 1 — от 25% до 33%, обычно 32%.
- VSR 2 — от 24% до 35%, обычно 30-34%.
- VSR 3 — от 29% до 35%, обычно 34%-36%.
- VSR 4 — обычно 44%-46%.
Таким образом, включение VSR даже на самом низком уровне отнимает значительную часть ресурсов видеокарты, но разница в производительности между уровнями VSR 1 и 3 очень незначительная. При использовании уровня 4 расход ресурсов максимальный, как и качество полученной графики.
Что это означает на практике? Для измерения влияния VSR был запущен напряжённый тест Cyberpunk 2077 с разрешением 4K и графикой Ultra, а также эпизод 3 Drink Masters от Netflix в полноэкранном режиме на втором мониторе 4K, подняв разрешение исходного видео 1080p с помощью VSR. Тестировались уровни VSR 1 и 4, а также проверялось, влияет ли активация DLSS и DLSS Frame Gen на производительность ещё сильнее, поскольку и DLSS, и RTX Video Super Resolution используют тензорные ядра Nvidia. Важны как средняя частота кадров, так и минимальная, так как минимальная влияет на общее ощущение плавности игры. Результаты:
- Cyberpunk 2077, без воспроизведения видео — 83,29 fps в среднем, 54,23 fps минимальный.
- Воспроизведение видео Netflix, VSR выключен — 81,78 fps в среднем, 40,40 fps минимальный.
- Netflix включен, VSR 1 включен — 48,74 fps в среднем, 39,66 fps минимальный.
- Netflix включен, VSR 4 включен — 44,55 fps в среднем, 36,97 fps минимальный.
Как видим, воспроизведение видео на втором мониторе при запуске Cyberpunk без VSR не влияет на среднюю частоту кадров, но приводит к резкому падению минимальной. Переключение на VSR мгновенно снижает среднюю частоту кадров. Количество кадров в секунду сокращается примерно на 40%, помимо снижения минимальной частоты кадров, которое происходит при потоковой трансляции видео.
Реальной разницы в производительности между VSR 1 и 4 нет. Того же самого нельзя сказать при использовании тензорных ядер одновременно для VSR и DLSS.
- Cyberpunk 2077, без воспроизведения видео — 83,29 fps в среднем, 54,23 fps минимальный.
- Netflix включен, VSR выключен, DLSS 3 (сбалансированный) Frame Gen включен — 110,48 fps в среднем, 72 fps минимальный.
- Netflix включен, VSR 1 включен, DLSS 3 (сбалансированный) Frame Gen включен — 106,44 fps в среднем, 69,86 fps минимальный.
- Netflix включен, VSR 4 включен, DLSS 3 (сбалансированный) Frame Gen включен — 87,27 fps в среднем, 61,66 fps минимальный.
Включение DLSS 3 Frame Gen увеличивает среднюю и минимальную частоту кадров Cyberpunk, даже с отключенным Nvidia Reflex. Поскольку половина игровых кадров генерируется ядрами ИИ Nvidia, снимая нагрузку с ядер GPU, переключение на VSR 1 почти не влияет на производительность. Зато средняя и минимальная частота кадров падают при включении VSR 4. Стоит отметить, что влияние VSR на производительность уменьшается при включении DLSS 3 Frame Gen. Даже в худшем случае результаты DLSS/VSR 4 обеспечивают лучшую производительность, чем Cyberpunk без активного DLSS.
В общем, вряд ли стоит запускать видео с апскейлингом VSR в браузере одновременно с игрой, поскольку его влияние на производительность может оказаться ощутимым. Если игра и видео одновременно не запускаются, проблем быть не должно. Если же вы хотите смотреть видео и одновременно играть, включить или выключить VSR нетрудно.
Как включить RTX Video Super Resolution
Теперь вы знаете, как работает RTX Video Super Resolution. Пора узнать, как технология включается. Нельзя просто нажать сочетание клавиш или кнопку мыши в GeForce Experience. Вместо этого необходимо воспользоваться панелью управления управления Nvidia.
Сначала следует убедиться в наличие всего необходимого. Поставьте последнюю версию драйвера видеокарты Game Ready, где появилась поддержка VSR. Браузеры Chrome или Edge тоже должны быть последних версий. Ещё нужна видеокарта Nvidia GeForce RTX 30-й или 40-й серий.
Далее нажмите правой кнопкой мыши на рабочем столе и выберите Панель управления Nvidia. В появившемся окне нажмите на опцию «Настройка параметров видеоизображения» в разделе «Видео» на панели слева. Выберите монитор для работы с VSR, поставьте флажок «Super Resolution» в разделе «Улучшение видео RTX» и выберите уровень качества. Рекомендуется уровень 4, который даёт лучшие результаты. Нажмите «Применить».
Если вы желаете отключить VSR во время игры, снимите галочку и снова нажмите «Применить».
Заключение: RTX Video Super Resolution меняет правила игры
Можно просто сказать,что технология RTX Video Super Resolution от Nvidia потрясающая. При этом нет смысла держать её постоянно включенной. Не помешал бы более простой способ включения и выключения с помощью GeForce Experience или горячей клавиши. Просмотр веб-видео с RTX Video Super Resolution выглядит как переход с видеокассет VHS на диски Blu-ray. Попробовав технологию однажды, вы не захотите смотреть видео без неё. Если вы смотрите много видео в браузере, RTX Video Super Resolution находится на уровне с Nvidia Broadcast и DLSS в качестве шикарной функции GeForce и является веской причиной купить видеокарту Nvidia, а не её конкурентов.
1 коммент
Интересно, как такие инструменты могут поддерживать не только профессионалов, но и любителей, которые хотят попробовать что-то новое, не тратя при этом больших средств. Такие сервисы – настоящее открытие для людей, интересующихся ИИ. Я увлекаюсь ИИ, и вот мой любимый сервис для редактирования видео .