ソニーAIカメラ、ゲーマーのボタン押下を予測する

Sonyの新規出願特許は、追加センサーを活用してAIモデルをサポートすることで、将来のゲームハードウェアにおけるレイテンシーを最小限に抑える同社の戦略を詳述している。

PlayStation Spectral Super Resolution（PSSR）は、PlayStation 5 Proとともにソニー初の公式アップスケーリング技術として発売された。PSSRは解像度を4Kまでアップスケールできるが、フレーム生成などの新しいグラフィカル技術は副次効果としてレイテンシーを追加することがある。つまり、ゲームのフレームレートが増えたとしても、その結果として操作性が低下する可能性があることを意味する。

GPUメーカーであるAMDとNvidiaはそれぞれRadeon Anti-LagおよびNvidia Reflexでこの問題に対応してきた。現在ソニーも独自のプロプライエタリなソリューションを開発しているようだ。

PlayStationの体験を変革し得るこの新しいSony特許。画像クレジット：Sony Interactive Entertainment.Tech4gamersによって最初に発見されたソニーの特許WO2025010132「TIMED INPUT/ACTION RELEASE」は、プレイヤーが次に押す可能性のあるボタンを予測することで、「ユーザーコマンドのタイミングリリース」を最適化することを目指している。

ソニーはこの特許の開発意図について次のように説明する。「ユーザーの入力動作とシステムのその後処理およびそのコマンドの実行の間にはレイテンシーが生じうる。これにより、コマンド実行が遅延し、予期せぬゲームプレイ結果をもたらすことがある。」

提案されたソリューションは複数の構成要素が連携して機能することで実現される：次に発生する入力を予測するように設計された機械学習AIモデルと、プレイヤーが押そうとしているボタンを検出するための外部センサー（例えばコントローラーを向けたカメラなど）。特許には「1つの例では、本手法は機械学習モデルのデータソースとしてカメラ入力を使用することを含む。カメラ入力は第1のユーザーコマンドを示しうる。」と記載されている。

別の可能性としては、コントローラー自体のボタンをセンサーとして利用する方法がある。ソニーのアナログボタンプッシュ技術への歴史から同社は次世代コントローラーにこのアプローチを採用する可能性がある。

特許に記載されたテクノロジーがPlayStation 6に正確な記述通りに実装されるとは限らない（出願済み特許が最終製品に直接反映されることは稀である）ものの、これはレイテンシー低減のために類似の革新を応用しようとするソニーの関心を示している。FSR 3やDLSS 3などのフレーム生成技術を採用することでシステム上で追加のフレームレイテンシーが生じうることを考えると、この点は特に重要である。

このような進歩は高いフレームレートと最小限のレイテンシーに依存するツイッチシューターのような高速なジャンルにとって特に有益だろう。しかしながら、本特許が将来のハードウェアにおいて具体化されるかどうかはまだ見えない。