Камера Sony с ИИ предугадывает нажатия кнопок геймером

Новый патент компании Sony описывает её стратегию по минимизации задержек в будущем игровом оборудовании благодаря использованию модели искусственного интеллекта, поддерживаемой дополнительными датчиками.

Компания Sony представила свою первую официальную технологию апскейлинга PlayStation Spectral Super Resolution (PSSR) совместно с игровой консолью PlayStation 5 Pro. Хотя PSSR способна увеличивать разрешение до уровня 4K, новые графические технологии, такие как генерация кадров, часто добавляют задержку в качестве побочного эффекта. Это означает, что хотя игры могут отображать больше кадров, они могут ощущаться менее отзывчивыми.

Производители графических процессоров AMD и Nvidia уже решили эту проблему с помощью технологий Radeon Anti-Lag и Nvidia Reflex соответственно. Теперь кажется, что Sony разрабатывает собственное фирменное решение.

Этот новый патент Sony может трансформировать игровой опыт на консолях PlayStation. Источник изображения: Sony Interactive Entertainment.Первым этот патент под номером WO2025010132 с названием «ВВОД/ОСВОБОЖДЕНИЕ ВРЕМЕНИ» (TIMED INPUT/ACTION RELEASE) обнаружил портал Tech4gamers. Patent направлен на оптимизацию «своевременного высвобождения пользовательских команд» путём прогнозирования того, какую кнопку игрок с наибольшей вероятностью нажмёт следующей.

Sony объясняет мотивацию создания патента: «Между действием пользователя и последующей обработкой системой и выполнением этой команды может возникать задержка. Это приводит к отложенному исполнению команд и непредвиденным результатам в игровой динамике».

Предлагаемое решение использует несколько компонентов, работающих совместно: модель машинного обучения для прогнозирования будущих входов данных и внешний датчик (например, камера, направленная на контроллер), который определяет кнопку, которую игрок готовится нажать. В патенте указано: «В одном из примеров метод включает использование входных данных с камеры как источника данных для модели машинного обучения. Входные данные с камеры могут указывать на первую пользовательскую команду».

Другой вариант предполагает использование собственных кнопок контроллера в качестве датчиков. Учитывая историю компании Sony с аналоговой технологией кнопок, она может внедрить этот подход в контроллер следующего поколения.

Хотя технология, описанная в патенте, может не появиться в PlayStation 6 именно в таком виде — патенты редко воплощаются в конечных продуктах напрямую — это сигнализирует об интересе Sony к применению аналогичных инноваций для снижения задержек. Это особенно актуально на фоне внедрения технологий генерации кадров, таких как FSR 3 и DLSS 3, которые могут добавлять дополнительную задержку кадров в любой системе, где они работают.

Такие достижения принесут особую пользу жанрам с высокой динамикой действий, таким как шутеры от первого лица (twitch shooters), которым нужны как высокая частота кадров, так и минимальная задержка. Однако будет ли этот конкретный патент реализован в будущем оборудовании, пока остаётся неизвестным.