Sony принесла ИИ-апскейлинг на обычную PS5: QSSR уже работает в двух играх

У базовой PlayStation 5 не появилось нового железа, но появилась функция, которую ещё недавно связывали прежде всего с PS5 Pro. Sony перенесла ИИ-реконструкцию изображения на обычную консоль — ценой более лёгкой нейросети и нескольких миллисекунд времени кадра.

Технология называется Quick Spectral Super Resolution (QSSR). Первыми её получают Marvel’s Wolverine и Ghost of Yōtei: сегодняшние обновления добавляют новый вариант апскейлинга как отдельный графический режим.

Как Sony уместила ИИ-апскейлер в обычную PS5

Технологию сделали в рамках проекта Amethyst, совместной инициативы Sony и AMD в области графики и машинного обучения. В основе лежит PSSR из PS5 Pro, но нейросеть пришлось упростить и написать для неё отдельную версию алгоритма. У PS5 Pro для таких задач есть специальное оборудование мощностью около 300 TOPS, а у обычной PS5 его нет, поэтому QSSR опирается в основном на вычисления в формате FP16 и другие приёмы оптимизации.

Заменой PSSR технология не станет: Sony заявляет, что для PS5 Pro остаётся именно он. Задача QSSR в другом: улучшить детализацию и убрать мерцание на базовой консоли.

Первые игры и замеры

Первые замеры сделали эксперты Digital Foundry. В Marvel’s Wolverine QSSR заметно повысил стабильность картинки и детализацию, а в Ghost of Yōtei эффект оказался скромнее: по частоте кадров технология почти равна FSR 3 в режиме производительности с разблокированным числом кадров. Ведущий инженер по рендерингу Sucker Punch Жасмин Патри говорит, что QSSR позволяет лучше прорабатывать мелкие детали героев и окружения и сохранять чёткость в движении.

Цена производительности

Бесплатной эта картинка не выходит. В Wolverine при реконструкции из 864p в 1440p QSSR добавляет к времени кадра от 1,5 до 1,8 мс по сравнению с собственным апскейлером Insomniac. В режиме с разблокированной частотой кадров это значит разницу в 8 или 10 FPS, а в режиме с целью 60 кадров потерю компенсирует динамическое разрешение. При выводе в 2160p нагрузка растёт примерно до 4,4 мс.

Планы Sony

Sony собирается открыть инструментарий QSSR всем разработчикам для PlayStation. Для игр, где уже есть PSSR, перенос не должен быть сложным: по словам Sony, технология может заменить PSSR без серьёзной переработки кода, хотя на настройку параметров вроде потоковой подгрузки текстур может уйти несколько дней.