Sony zrobił znaczący krok w kierunku zwiększenia dostępności gier dla osób niesłyszących, składając patent na innowacyjny tłumacz języka migowego w grze. Ta technologia, zatytułowana „Tłumaczenie języka migowego w wirtualnym środowisku”, ma na celu wypełnienie luk komunikacyjnych poprzez tłumaczenie amerykańskiego języka migowego (ASL) na japoński język migowy (JSL) w czasie rzeczywistym, pozwalając głuchym graczom bezproblemowo interakcję w grach wideo.
System zaproponowany przez Sony polega na przechwytywaniu gestów języka migowego jednego użytkownika, przekształcaniu ich w tekst, a następnie przetłumaczenie tego tekstu na odpowiednie gesty języka migowego w języku ojczystym innego użytkownika. Proces ten zapewnia, że gracze z różnych środowisk językowych mogą skutecznie komunikować się podczas rozmów w grze. Sony podkreśla znaczenie tej technologii, zauważając, że języki migowe nie są uniwersalne i różnią się w zależności od pochodzenia geograficznego, powodując w ten sposób potrzebę takiego systemu tłumaczenia.
Zaproponował korzystanie z urządzeń VR i przetwarzanie gier w chmurze
Aby wdrożyć ten system, Sony sugeruje użycie urządzeń VR lub wyświetlaczy montowanych na głowie (HMDS). Urządzenia te łączą się z urządzeniami użytkownikowymi, takimi jak komputery osobiste lub konsole do gier, zapewniając wciągające wrażenia z oglądania w środowisku wirtualnym. HMD można podłączyć za pomocą środków przewodowych lub bezprzewodowych, zwiększając elastyczność i wrażenia użytkownika.
Ponadto Sony przewiduje, że system pozwoli na komunikację urządzeń użytkowników przez sieć z serwerem gier. Ten serwer zarządzałby wspólną sesją gry wideo, utrzymując stan gry i synchronizując ją na wszystkich podłączonych urządzeniach. Ta konfiguracja umożliwia graczom interakcję w tym samym środowisku wirtualnym, wspierając wspólne wrażenia z gier.
Sony proponuje również zintegrowanie tego systemu z gier w chmurze, w którym serwer gier renderował i przesyłał strumieniowo wideo do każdego urządzenia użytkownika. Takie podejście może potencjalnie zwiększyć wydajność i dostępność systemu tłumaczenia języka migowego, dzięki czemu jest bardziej wydajne i przyjazne dla użytkownika dla osób niesłyszących.