Sony-Patent: Gebärdensprachübersetzer im Spiel zur Verbesserung der Zugänglichkeit für hörgeschädigte Spieler

Sony hat einen Patentantrag eingereicht, um hörgeschädigten Spielern ein besseres Spielerlebnis zu bieten. Das Patent beschreibt eine Technologie, die in Spielen verschiedene Gebärdensprachen in Echtzeit übersetzen kann.

Verwendung von VR-Geräten und Cloud-Spielen, um Echtzeitübersetzungen zu erreichen

Das Patent mit dem Titel „Gebärdensprachübersetzung in virtueller Umgebung“ demonstriert eine Technologie, die die amerikanische Gebärdensprache (ASL) in Echtzeit in die japanische Gebärdensprache (JSL) übersetzen kann und so die Kommunikation zwischen japanischen Sprechern und Spielern, die ASL verwenden, erleichtert. .

Sonys Ziel ist es, ein System zu entwickeln, das hörgeschädigten Spielern dabei hilft, Gespräche im Spiel durch Echtzeitübersetzung der Gebärdensprache zu führen. Die im Patent beschriebene Technologie würde es virtuellen Indikatoren oder Avataren ermöglichen, die auf dem Bildschirm angezeigt werden, in Echtzeit in Gebärdensprache zu kommunizieren. Das System übersetzt zunächst Gesten in einer Gebärdensprache in Text, wandelt dann den Text in eine andere angegebene Sprache um und übersetzt schließlich die empfangenen Daten in Gesten in einer anderen Gebärdensprache.

Sony erklärt im Patent: „Ausführungsformen der vorliegenden Offenbarung beziehen sich auf Methoden und Systeme zum Erfassen der Gebärdensprache eines Benutzers (z. B. eines Japanisch sprechenden Benutzers) und zum Übersetzen der Gebärdensprache an einen anderen Benutzer (z. B. eines Englisch sprechenden Benutzers). . Da Gebärdensprachen je nach regionaler Herkunft variieren, ist es erforderlich, die Gebärdensprache eines Benutzers angemessen zu erfassen, seine Muttersprache zu verstehen und eine neue Gebärdensprache als Ausgabe für einen anderen Benutzer zu generieren

Eine von Sony vorgeschlagene Implementierungslösung ist die Verwendung von VR-Geräten oder Head-Mounted-Displays (HMD). Details von Sony: „In einigen Ausführungsformen ist das HMD über eine kabelgebundene oder drahtlose Verbindung mit einem Benutzergerät wie einem Personalcomputer, einer Spielekonsole oder einem anderen Computergerät verbunden. In einigen Ausführungsformen rendert das Benutzergerät über das angezeigte Grafiken.“ HMD, Bieten Sie Benutzern ein immersives Seherlebnis in einer virtuellen Umgebung ”

.

Sony schlug außerdem vor, dass ein Benutzergerät über das Netzwerk nahtlos mit einem anderen Benutzergerät auf dem Spieleserver kommunizieren kann. Sony sagte: „In einigen Ausführungsformen führt der Spieleserver eine gemeinsame Sitzung des Videospiels durch, behält den kanonischen Status des Videospiels und seiner virtuellen Umgebung bei und der Status des Benutzergeräts in Bezug auf die virtuelle Umgebung wird damit synchronisiert.“ 🎜>

Mit diesem Setup können Benutzer dieselbe virtuelle Umgebung (d. h. ein Spiel) in einem gemeinsam genutzten Netzwerk oder Server teilen und mit ihr interagieren. Sony fügt außerdem hinzu, dass der Spieleserver in einigen Ausführungsformen des Systems Teil eines Cloud-Gaming-Systems sein kann, das zwischen jedem Benutzergerät „Videos rendern und streamen“ kann.