Sony ゲーム内手話翻訳機の特許を公開

ソニーは、聴覚障害者や口のきけないゲーマー向けに、より優れたゲーム アクセシビリティ機能を提供するために特許を申請しました。この特許は、ゲーム内で特定の手話がどのようにリアルタイムで別の手話に翻訳されるかを示しています。

ソニーの特許: ビデオゲーム用の ASL から JSL への翻訳

VR機器を使用し、クラウドゲームを通じて操作する予定です

ソニーはビデオゲームにリアルタイム手話翻訳を追加する特許を申請した。 「仮想環境における手話通訳」と題されたこの特許は、アメリカ手話（ASL）を日本語話者が使用する日本手話（JSL）に翻訳できる技術を実証している。

ソニーは、ゲーム内の会話中にリアルタイムで手話を翻訳することで聴覚障害のあるプレイヤーを支援するシステムを構築することが目標であると述べています。この特許に記載されている技術により、画面上に表示される仮想インジケーターやアバターがリアルタイムで手話でコミュニケーションできるようになる。システムは、まずある言語のジェスチャをテキストに変換し、次にそのテキストを別の指定された言語に変換し、最後に受信したデータを別の言語のジェスチャに変換します。

「本開示の実施形態は、あるユーザー（例えば日本人）の手話を捕捉し、その手話を別のユーザー（例えば英語話者）に翻訳するための方法およびシステムに関する」とソニーは説明している。特許。 「手話は地域の出身地によって異なるため、手話は世界共通言語ではありません。これには、あるユーザーの手話を適切にキャプチャし、母国語を理解し、別のユーザーの出力として新しい手話を生成する必要があります。彼らの母国語の手話です。」

Sony が説明しているように、このシステムを実装する 1 つの方法は、VR タイプのデバイスまたはヘッドマウント ディスプレイ (HMD) の助けを借りて行うことです。 「いくつかの実施形態では、ＨＭＤは、有線または無線接続を介して、パーソナルコンピュータ、ゲームコンソール、または他のコンピューティングデバイスなどのユーザデバイスに接続する」とソニーは詳細に述べている。 「いくつかの実施形態では、ユーザーデバイスは、ＨＭＤを介して表示されるグラフィックをレンダリングし、ユーザーに仮想環境の没入型の視聴体験を提供する。」

ソニーはさらに、あるユーザーデバイスがネットワークを介してゲームサーバー上の別のユーザーデバイスとシームレスに通信できることを提案しました。 「一部の実施形態では、ゲームサーバーはビデオゲームの共有セッションを実行し、ビデオゲームとその仮想環境の標準状態を維持し、ユーザーデバイスは仮想環境の状態に関してそれらと同期する」とソニーは述べた。 ."

この設定を使用すると、ユーザーは共有ネットワークまたはサーバー上の同じ仮想環境 (ゲームなど) を共有し、対話することができます。ソニーはまた、システムの一部の実施形態では、ゲームサーバーが各ユーザーデバイス間で「ビデオをレンダリングしてストリーミングする」クラウドゲームシステムの一部である可能性があるとも付け加えた。