Innowacyjne urządzenie wypełnia lukę komunikacyjną dla niesłyszących graczy

Przełomowy patent Sony ma na celu zwiększenie dostępności dla niesłyszących graczy poprzez wprowadzenie w grach tłumaczenia na język migowy w czasie rzeczywistym. Ta innowacyjna technologia wypełnia luki komunikacyjne, umożliwiając płynną interakcję pomiędzy graczami posługującymi się różnymi językami migowymi.

Sony patentuje tłumaczenie języka migowego w czasie rzeczywistym dla gier wideo

Wykorzystywanie technologii VR i gier w chmurze

Patent zatytułowany „TŁUMACZENIE JĘZYKA MIGOWEGO W ŚRODOWISKU WIRTUALNYM” szczegółowo opisuje system umożliwiający tłumaczenie w czasie rzeczywistym między językami migowymi, takimi jak amerykański język migowy (ASL) i japoński język migowy (JSL). Sony widzi przyszłość, w której niesłyszący gracze będą mogli w pełni uczestniczyć w interakcjach online dzięki dokładnemu i natychmiastowemu tłumaczeniu na język migowy.

Proponowany system wykorzystuje ekranowe wirtualne wskaźniki lub awatary do wyświetlania przetłumaczonego języka migowego w czasie rzeczywistym. Proces ten obejmuje trzyetapowe tłumaczenie: gesty migowe są najpierw konwertowane na tekst, następnie tłumaczone na język docelowy, a na koniec renderowane jako gesty migowe w docelowym języku migowym.

„Niniejsze ujawnienie dotyczy metod i systemów przechwytywania i tłumaczenia języka migowego między użytkownikami posługującymi się różnymi rodzimymi językami migowymi” – wyjaśnia Sony w patencie. „Biorąc pod uwagę geograficzne różnice w językach migowych, kluczowy jest system zdolny do dokładnego przechwytywania, interpretowania i generowania wyników języka migowego w ojczystym języku migowym odbiorcy.”

Sony sugeruje integrację tej technologii z goglami VR lub wyświetlaczami nagłownymi (HMD). Urządzenia te można podłączyć do komputera użytkownika, konsoli do gier lub innego urządzenia komputerowego, zapewniając wciągające środowisko wirtualne.

Co więcej, Sony proponuje system sieciowy, w którym urządzenia użytkowników komunikują się z serwerem gier, utrzymując zsynchronizowany stan gry u wszystkich graczy. Serwer ten mógłby nawet stanowić część platformy do gier w chmurze, przesyłającej strumieniowo renderowane wideo na urządzenie każdego gracza.

Ta architektura umożliwia płynne interakcje dla wielu graczy we współdzielonym środowisku wirtualnym, skutecznie usuwając bariery komunikacyjne dla niesłyszących graczy dzięki tłumaczeniu na język migowy w czasie rzeczywistym.