Sony-patent: in-game gebarentaalvertaler om de toegankelijkheid voor slechthorende spelers te verbeteren

Sony heeft een patentaanvraag ingediend om slechthorende spelers een betere game-ervaring te bieden. Het patent beschrijft technologie die verschillende gebarentalen in realtime in games kan vertalen.

VR-apparatuur en cloudgames gebruiken om realtime vertaling te realiseren

Het patent, getiteld "Sign Language Translation in Virtual Environment", demonstreert een technologie die Amerikaanse Gebarentaal (ASL) in realtime kan vertalen naar Japanse Gebarentaal (JSL), waardoor de communicatie tussen Japanse sprekers en spelers die ASL gebruiken wordt vergemakkelijkt. .

Het doel van Sony is om een ​​systeem te bouwen dat slechthorende spelers helpt bij het voeren van in-game gesprekken door middel van realtime vertaling van gebarentaal. De technologie die in het patent wordt beschreven, zou het mogelijk maken dat virtuele indicatoren of avatars die op het scherm worden weergegeven, in realtime in gebarentaal kunnen communiceren. Het systeem vertaalt gebaren in de ene gebarentaal eerst naar tekst, zet de tekst vervolgens om in een andere opgegeven taal en vertaalt ten slotte de ontvangen gegevens naar gebaren in een andere gebarentaal.

Sony legt in het patent uit: “Belichamingen van de huidige openbaarmaking hebben betrekking op methoden en systemen voor het vastleggen van de gebarentaal van één gebruiker (bijvoorbeeld een Japanse spreker) en het vertalen van de gebarentaal naar een andere gebruiker (bijvoorbeeld een Engelse spreker) Omdat gebarentalen variëren per regionale herkomst, vereist dit dat je de gebarentaal van de ene gebruiker op de juiste manier vastlegt, de moedertaal begrijpt en een nieuwe gebarentaal genereert als uitvoer voor een andere gebruiker ”

Een door Sony voorgestelde implementatieoplossing is het gebruik van VR-apparatuur of head-mounted displays (HMD). Sony details: "In sommige uitvoeringsvormen is de HMD verbonden met een gebruikersapparaat, zoals een personal computer, gameconsole of ander computerapparaat, via een bekabelde of draadloze verbinding. In sommige uitvoeringsvormen geeft het gebruikersapparaat afbeeldingen weer die worden weergegeven via de HMD, Bied gebruikers een meeslepende kijkervaring in een virtuele omgeving ”

Sony stelde verder voor dat het ene gebruikersapparaat via het netwerk naadloos kan communiceren met een ander gebruikersapparaat op de gameserver. Sony zei: "In sommige uitvoeringsvormen voert de gameserver een gedeelde sessie van de videogame uit, handhaaft de canonieke status van de videogame en zijn virtuele omgeving, en wordt de status van het gebruikersapparaat met betrekking tot de virtuele omgeving daarmee gesynchroniseerd." 🎜>