Компания Sony запатентовала технологию генерации кадров на основе машинного обучения, предназначенную для уменьшения задержки управления в играх. Разработка использует экстраполяцию изображения и потенциально может применяться в будущих игровых консолях, включая PlayStation 6. В отличие от традиционной интерполяции, при которой дополнительный кадр создаётся на основе двух уже подготовленных изображений, новый метод предполагает предсказание следующего кадра по предыдущим данным. Это позволяет формировать промежуточное изображение без ожидания завершения рендеринга следующего настоящего кадра. Такой подход потенциально способен уменьшить дополнительную задержку, возникающую при использовании генерации кадров.
Главная особенность предложенного решения заключается в использовании алгоритмов машинного обучения для прогнозирования изменений изображения. Система должна анализировать предыдущие кадры и на их основе определять, как может выглядеть следующая сцена. При обычной интерполяции алгоритму необходимы данные о двух соседних кадрах, поэтому получение дополнительного изображения связано с ожиданием нового результата рендеринга. Экстраполяция позволяет отказаться от этого требования, но создаёт другую проблему: системе необходимо достаточно точно предсказывать движение объектов и изменения сцены. Ошибки прогноза могут приводить к визуальным артефактам, а обработка данных требует вычислительных ресурсов. Поэтому практическая эффективность такого метода будет зависеть от точности модели и возможностей аппаратной платформы.
Пока технология Sony существует в виде запатентованной разработки, а её применение в коммерческих устройствах не подтверждено. Компания не объявляла о внедрении этого алгоритма в PlayStation 6 и не раскрывала характеристики оборудования, необходимого для его работы. При успешной реализации технология сможет повысить воспринимаемую плавность изображения без характерной для некоторых методов интерполяции дополнительной задержки. Однако патент сам по себе не гарантирует появления функции в будущей консоли. Для оценки преимуществ потребуются реальные испытания, которые покажут качество предсказанных кадров, вычислительные затраты и влияние алгоритма на время отклика управления.