Patent Sony: tłumacz języka migowego w grze poprawiający dostępność dla graczy z wadą słuchu

Firma Sony złożyła wniosek patentowy, aby zapewnić graczom z wadą słuchu lepsze wrażenia z gry. Patent opisuje technologię, która może tłumaczyć różne języki migowe w grach w czasie rzeczywistym.

Korzystanie ze sprzętu VR i gier w chmurze w celu uzyskania tłumaczenia w czasie rzeczywistym

Patent zatytułowany „Tłumaczenie języka migowego w środowisku wirtualnym” demonstruje technologię, która może przetłumaczyć amerykański język migowy (ASL) na japoński język migowy (JSL) w czasie rzeczywistym, ułatwiając w ten sposób komunikację między osobami mówiącymi po japońsku a graczami korzystającymi z ASL. .

Celem firmy Sony jest zbudowanie systemu pomagającego graczom z wadą słuchu w prowadzeniu rozmów w grze poprzez tłumaczenie języka migowego w czasie rzeczywistym. Technologia opisana w patencie umożliwiłaby wyświetlanie na ekranie wirtualnych wskaźników lub awatarów komunikowanie się w języku migowym w czasie rzeczywistym. System najpierw tłumaczy gesty jednego języka migowego na tekst, następnie konwertuje tekst na inny określony język, a na koniec przekłada otrzymane dane na gesty w innym języku migowym.

Sony wyjaśnia w patencie: „Przykłady wykonania niniejszego ujawnienia dotyczą sposobów i systemów przechwytywania języka migowego jednego użytkownika (np. osoby mówiącej po japońsku) i tłumaczenia języka migowego innego użytkownika (np. osoby mówiącej po angielsku) Ponieważ języki migowe różnią się w zależności od regionu, wymaga to odpowiedniego przechwycenia języka migowego jednego użytkownika, zrozumienia jego języka ojczystego i wygenerowania nowego języka migowego jako wyniku dla innego użytkownika ”

Jednym z rozwiązań wdrożeniowych zaproponowanych przez Sony jest wykorzystanie sprzętu VR lub wyświetlaczy montowanych na głowie (HMD). Szczegóły Sony: „W niektórych przykładach wykonania HMD jest podłączony do urządzenia użytkownika, takiego jak komputer osobisty, konsola do gier lub inne urządzenie komputerowe, za pośrednictwem połączenia przewodowego lub bezprzewodowego. W niektórych przykładach urządzenie użytkownika renderuje grafikę wyświetlaną za pośrednictwem HMD, Zapewnij użytkownikom wciągające wrażenia wizualne w środowisku wirtualnym ”

Firma Sony zaproponowała ponadto, aby jedno urządzenie użytkownika mogło bezproblemowo komunikować się z innym urządzeniem użytkownika na serwerze gry za pośrednictwem sieci. Sony stwierdziło: „W niektórych przykładach serwer gry wykonuje wspólną sesję gry wideo, utrzymuje stan kanoniczny gry wideo i jej środowiska wirtualnego, a stan urządzenia użytkownika w odniesieniu do środowiska wirtualnego jest z nim synchronizowany”. 🎜>