소니, 게이머의 버튼 누름을 예측하는 AI 카메라 개발

Sony의 새로운 특허는 추가 센서의 지원을 받는 AI 모델을 활용하여 미래 게임 하드웨어의 지연 시간을 최소화하려는 회사의 전략을 상세히 설명한다.

PlayStation Spectral Super Resolution(PSSR)이라는 최초의 공식 업스케일링 기술이 PlayStation 5 Pro와 함께 출시되었다. PSSR은 낮은 해상도를 4K로 업스케일할 수 있지만, 프레임 생성과 같은 최신 그래픽 기법은 종종 지연 시간을 부수적인 효과로 추가한다. 이는 게임에서 더 많은 프레임을 표시할 수는 있지만 결과적으로 반응성이 떨어질 수 있음을 의미한다.

GPU 제조사인 AMD와 Nvidia는 각각 Radeon Anti-Lag과 Nvidia Reflex를 통해 이 문제를 해결했다. 이제 Sony도 자체 고유 솔루션을 개발 중인 것으로 보인다.

이 새로운 Sony 특허는 PlayStation 경험을 변화시킬 수 있다. 이미지 크레딧: Sony Interactive Entertainment.Tech4gamers에 의해 처음 발견된 Sony의 WO2025010132 특허인 “TIMED INPUT/ACTION RELEASE”는 플레이어가 다음으로 누를 가능성이 높은 버튼을 예측함으로써 “사용자 명령의 시간 기반 해제”를 최적화하는 것을 목표로 한다.

Sony는 이 특허背后的 동기를 다음과 같이 설명한다: “사용자의 입력 동작과 시스템의 후속 처리 및 해당 명령 실행 사이에는 지연 시간이 발생할 수 있다. 이는 명령 실행이 지연되고 의도치 않은 게임 플레이 결과를 초래한다.”

제안된 해결책은 함께 작동하는 여러 구성 요소를 사용한다: 곧 다가올 입력을 예측하도록 설계된 머신러닝 AI 모델과 플레이어가 누르准备 중인 버튼을 감지하기 위한 외부 센서(예. 컨트롤러를 향하는 카메라)가 그것이다. 특허는 다음과 같이 명시한다: “한 예에서, 이 방법은 머신러닝 모델의 데이터 소스로 카메라 입력을 사용하는 방법을 포함한다. 카메라 입력은 첫 번째 사용자 명령을 나타낼 수 있다.”

다른 가능성으로는 컨트롤러 자체의 버튼을 센서로 사용하는 것이 있다. Sony의 아날로그 버튼 기술에 대한 역사를 고려할 때, 회사는 이를 차세대 컨트롤러에 통합할 가능성이 높다.

특허에 outlined된 기술이 PlayStation 6에서 정확히 설명된 대로 등장하지는 않을 수 있다(특허 출원은 최종 제품으로 직접 변환되는 경우가 드물기 때문이다). 이는 지연 시간을 줄이기 위해 유사한 혁신을 적용하려는 Sony의 관심을 나타낸다. FSR 3 및 DLSS 3과 같은 프레임 생성 기술이 채택됨에 따라 이러한 기술은 특히 관련성이 높다. 이러한 기술은 실행되는 모든 시스템에서 추가적인 프레임 지연을 도입할 수 있다.

이러한 발전은 높은 프레임 속도와 최소한의 지연 시간을 모두 의존하는 빠른 템포의 장르인 트위치 슈터에게 특히 이점을 제공할 것이다. 그러나 이 특정 특허가 미래 하드웨어에 구현될지는 아직 미지수이다.