Virtueller Übersetzer schließt Kommunikationslücke im Gaming

Sony hat einen Patentantrag eingereicht, um gehörlosen Spielern einen besseren Zugang zu Spielen zu ermöglichen. Das Patent zeigt, wie bestimmte Gebärdensprachen in eine andere Sprache im Spiel übersetzt werden können.

Sony-Patent: Entwicklung eines Übersetzers für amerikanische Gebärdensprache (ASL) in japanische Gebärdensprache (JSL) für Videospiele

Geplant ist die Verwendung von VR-Geräten und der Betrieb über Cloud-Gaming

Sony hat einen Patentantrag eingereicht, um Videospielen Gebärdensprachübersetzung in Echtzeit hinzuzufügen. Das Patent mit dem Titel „Sign Language Interpretation in Virtual Environments“ demonstriert eine Technologie, mit der die amerikanische Gebärdensprache (ASL) japanischen Benutzern mithilfe der japanischen Gebärdensprache (JSL) vermittelt werden kann.

Sony sagt, sein Ziel sei es, ein System zu entwickeln, das gehörlosen Spielern hilft, indem es Gebärdensprache in Echtzeit während Gesprächen im Spiel übersetzt. Die im Patent beschriebene Technologie würde es einem auf dem Bildschirm angezeigten virtuellen Indikator oder Avatar ermöglichen, Gebärdensprache in Echtzeit zu vermitteln. Das System übersetzt zunächst Gesten in einer Sprache in Text, wandelt dann den Text in eine andere angegebene Sprache um und übersetzt schließlich die empfangenen Daten in Gesten in einer anderen Sprache.

Sony beschreibt im Patent: „Ausführungsformen der vorliegenden Offenlegung beziehen sich auf Methoden und Systeme zum Erfassen der Gebärdensprache eines Benutzers (z. B. eines Japaners) und zum Übersetzen der Gebärdensprache für einen anderen Benutzer (z. B. einen Englisch sprechenden Benutzer) Da Gebärdensprachen je nach regionalem Ursprung variieren und Gebärdensprachen keine universellen Sprachen sind, ist es erforderlich, die Gebärdensprache eines Benutzers angemessen zu erfassen, seine Muttersprache zu verstehen und eine neue Gebärdensprache für einen anderen Benutzer in seiner Muttersprache zu generieren. ”

Sony erklärt, dass eine Möglichkeit zur Implementierung dieses Systems die Verwendung eines VR-Geräts oder eines Head-Mounted-Displays (HMD) ist. Details von Sony: „In einigen Ausführungsformen ist das HMD über eine kabelgebundene oder drahtlose Verbindung mit einem Benutzergerät wie einem Personalcomputer, einer Spielekonsole oder einem anderen Computergerät verbunden. In bestimmten Ausführungsformen rendert das Benutzergerät Grafiken, die über das angezeigt werden.“ HMD, Bieten Sie Benutzern ein immersives Seherlebnis in einer virtuellen Umgebung ”

Sony schlug außerdem vor, dass ein Benutzergerät über das Netzwerk nahtlos mit einem anderen Benutzergerät auf dem Spieleserver kommunizieren kann. Sony sagte: „In einigen Ausführungsformen führt der Spieleserver eine gemeinsame Sitzung des Videospiels durch, behält den kanonischen Status des Videospiels und seiner virtuellen Umgebung bei und das Benutzergerät synchronisiert sich damit in Bezug auf den Status der virtuellen Umgebung.“

Mit diesem Setup können Benutzer in derselben virtuellen Umgebung (z. B. Spiel) in einem gemeinsam genutzten Netzwerk oder Server teilen und interagieren. Sony sagte außerdem, dass der Spieleserver in einigen Ausführungsformen des Systems Teil eines Cloud-Gaming-Systems sein könnte, das „Videos rendert und streamt“ zwischen jedem Benutzergerät.