仮想翻訳者がゲームにおけるコミュニケーションギャップを埋める

ソニーは、聴覚障害のあるゲーマーにゲームへのアクセシビリティを向上させるために特許を申請しました。この特許は、特定の手話がどのようにして別のゲーム内言語に翻訳されるかを示しています。

ソニーの特許: ビデオゲーム用のアメリカ手話 (ASL) から日本手話 (JSL) への翻訳機の開発

VR機器を使用し、クラウドゲームで運営する予定

ソニーは、ビデオゲームにリアルタイムの手話翻訳を追加する特許を申請しました。 「仮想環境における手話通訳」と題されたこの特許は、日本手話（JSL）を使用してアメリカ手話（ASL）を日本のユーザーに伝えることができる技術を実証している。

ソニーは、ゲーム内の会話中に手話をリアルタイムで翻訳することで、聴覚障害のあるプレイヤーを支援するシステムを構築することが目標だと述べています。この特許に記載されている技術により、画面上に表示される仮想インジケーターまたはアバターがリアルタイムで手話を伝えることが可能になります。システムは、まず、ある言語のジェスチャをテキストに変換し、次にそのテキストを別の指定された言語に変換し、最後に受信したデータを別の言語のジェスチャに変換します。

ソニーは特許の中で次のように説明しています:「本開示の実施形態は、あるユーザー (例: 日本人) の手話をキャプチャし、その手話を別のユーザー (例: 英語話者) に翻訳する方法およびシステムに関する。手話は地域の起源によって異なり、手話は世界共通の言語ではないため、これには、あるユーザーの手話を適切に捕捉し、その母国語を理解し、別のユーザーのためにその母国語で新しい手話を生成することが必要です。 ”

ソニーは、このシステムを実装する 1 つの方法は VR タイプのデバイスまたはヘッドマウント ディスプレイ (HMD) の助けを借りて行うことであると説明しています。ソニーの詳細: 「いくつかの実施形態では、HMD は、有線または無線接続を介して、パーソナル コンピュータ、ゲーム コンソール、またはその他のコンピューティング デバイスなどのユーザー デバイスに接続されます。特定の実施形態では、ユーザー デバイスは、 HMD、仮想環境「

ソニーはさらに、あるユーザーデバイスがネットワークを介してゲームサーバー上の別のユーザーデバイスとシームレスに通信できることを提案しました。ソニーは「いくつかの実施形態では、ゲームサーバーはビデオゲームの共有セッションを実行し、ビデオゲームとその仮想環境の正規状態を維持し、ユーザーデバイスは仮想環境の状態に関してそれらと同期する。」と述べた。

この設定を使用すると、ユーザーは共有ネットワークまたはサーバー上の同じ仮想環境 (ゲームなど) を共有し、対話することができます。ソニーはまた、システムの一部の実施形態では、ゲームサーバーが各ユーザーデバイス間で「ビデオをレンダリングしてストリーミングする」クラウドゲームシステムの一部になる可能性があるとも述べた。