Sony 画期的なゲーム内 AI 言語翻訳機能を発表
ソニーは、聴覚障害者や口のきけないゲーマー向けに、より優れたゲーム アクセシビリティ機能を提供するために特許を申請しました。この特許は、ある手話をリアルタイムで別のゲーム内言語に翻訳する方法を示しています。
ソニーの特許: ビデオゲーム用のアメリカ手話から日本手話への翻訳機の開発
VR機器を使用し、クラウドゲームを通じて操作する予定です
ソニーは、ビデオゲームにリアルタイム手話翻訳を追加する特許を申請しました。 「仮想環境における手話通訳」と題されたこの特許は、アメリカ手話(ASL)を日本人が理解できる日本手話(JSL)に翻訳できる技術を実証している。
ソニーは、ゲーム内の会話中に手話をリアルタイムで翻訳することで、聴覚障害のあるプレイヤーを支援するシステムを構築することが目標だと述べています。この特許に記載されている技術により、画面上に表示される仮想インジケーターやアバターがリアルタイムで手話でコミュニケーションできるようになる。システムは、まずある言語のジェスチャをテキストに変換し、次にそのテキストを別の指定された言語に変換し、最後に受信したデータを別の言語のジェスチャに変換します。
「本開示の実施形態は、あるユーザー(例えば日本人)の手話を捕捉し、その手話を別のユーザー(例えば英語話者)に翻訳するための方法およびシステムに関する」とソニーは説明している。特許。 「手話は地域の出身地によって異なるため、手話は世界共通言語ではありません。これには、あるユーザーの手話を適切にキャプチャし、その母国語を理解し、別のユーザーのために母国語での出力として新しい手話を生成する必要があります」 ."
ソニーは、VR 機器やヘッドマウント ディスプレイ (HMD) を利用したシステム実装の可能性を説明しました。 「いくつかの実施形態では、HMDは、有線または無線接続を介して、パーソナルコンピュータ、ゲームコンソール、または他のコンピューティングデバイスなどのユーザデバイスに接続する」とソニーは詳細に述べている。 「いくつかの実施形態では、ユーザーデバイスは、HMDを介して表示されるグラフィックをレンダリングし、ユーザーに仮想環境の没入型の視聴体験を提供する。」
この設定を使用すると、ユーザーは共有ネットワークまたはサーバー上の同じ仮想環境 (ゲームなど) を共有し、対話することができます。ソニーはまた、システムの一部の実装では、ゲームサーバーが各ユーザーデバイス間で「ビデオをレンダリングしてストリーミングする」クラウドゲームシステムの一部になる可能性があるとも付け加えた。