Энтузиаст и разработчик в области искусственного интеллекта представил концепт системы аппаратного нейросетевого масштабирования изображения для видеоигр на базе серверного ускорителя Nvidia Tesla V100 с 16GB памяти. Данная плата архитектуры Volta оснащена тензорными ядрами первого поколения и в настоящее время доступна на вторичном рынке примерно за $230. Автор проекта создал решение по типу временного апскейлинга, использующее компактную нейронную сеть, которая задействует аппаратные блоки ускорителя для обработки видеопотока в реальном времени.
Архитектура системы предполагает установку Nvidia Tesla V100 во второй свободный слот PCIe x16 на материнской плате рядом с основной видеокартой любой модели. В текущей тестовой сборке драйвер серверной карты был модифицирован для работы в режиме WDDM, а вывод готового изображения организован через встроенное графическое ядро процессора. В процессе работы плата перехватывает отрендеренные основной видеокартой кадры, выполняет их масштабирование силами тензорных ядер и передает обратно без необходимости полной замены имеющегося графического адаптера.
В качестве демонстрации работоспособности концепта автор показал масштабирование игры Tomb Raider 2013 года из разрешения 720p в 1080p. В настоящее время проект находится на стадии альфа-версии, а разработчик занимается удержанием стабильной частоты кадров выше 60 FPS, оптимизацией задержек и повышением итогового качества картинки с помощью различных нейросетевых моделей.