Sony Revela inovação: tradutor de idiomas com IA no jogo

A Sony registrou um pedido de patente para fornecer melhores recursos de acessibilidade em jogos para jogadores surdos e mudos. A patente mostra como traduzir uma linguagem de sinais para outra linguagem do jogo em tempo real.

Patente da Sony: Desenvolvendo um tradutor de linguagem de sinais americana para linguagem de sinais japonesa para videogames

Está planejado usar equipamentos VR e operar por meio de jogos em nuvem

A Sony registrou um pedido de patente para adicionar tradução em linguagem de sinais em tempo real aos videogames. A patente, intitulada "Interpretação de Linguagem de Sinais em Ambientes Virtuais", demonstra tecnologia que pode traduzir a Linguagem de Sinais Americana (ASL) para a Linguagem de Sinais Japonesa (JSL), que pode ser entendida por falantes de japonês.

A Sony afirma que seu objetivo é construir um sistema que ajude jogadores surdos, traduzindo a linguagem de sinais em tempo real durante conversas no jogo. A tecnologia descrita na patente permitiria que indicadores virtuais ou avatares exibidos na tela se comunicassem em linguagem de sinais em tempo real. O sistema primeiro traduzirá os gestos de um idioma em texto, depois converterá o texto em outro idioma especificado e, finalmente, traduzirá os dados recebidos em gestos em outro idioma.

"As modalidades da presente divulgação referem-se a métodos e sistemas para capturar a linguagem de sinais de um usuário (por exemplo, uma pessoa japonesa) e traduzir a linguagem de sinais para outro usuário (por exemplo, um falante de inglês)", descreve a Sony no patente. "Como as línguas de sinais variam de acordo com a origem regional, as línguas de sinais não são línguas universais. Isso requer a captura adequada da linguagem de sinais de um usuário, a compreensão de sua língua nativa e a geração de uma nova linguagem de sinais para outro usuário como saída em sua linguagem de sinais nativa ."

A Sony explicou uma possível implementação do sistema, ou seja, com a ajuda de equipamentos VR ou head-mounted displays (HMD). “Em algumas modalidades, o HMD se conecta a um dispositivo de usuário, como um computador pessoal, console de jogo ou outro dispositivo de computação, por meio de uma conexão com ou sem fio”, detalha a Sony. “Em algumas modalidades, o dispositivo do usuário renderiza gráficos exibidos através do HMD, proporcionando ao usuário uma experiência de visualização imersiva do ambiente virtual

A Sony propôs ainda que um dispositivo de usuário possa se comunicar perfeitamente com outro dispositivo de usuário no servidor de jogo por meio da rede. “Em algumas modalidades, o servidor de jogo realiza uma sessão compartilhada do videogame, mantém o estado canônico do videogame e seu ambiente virtual”, disse a Sony, “e o dispositivo do usuário sincroniza com isso em relação ao estado do ambiente virtual ."

Com esta configuração, os usuários podem compartilhar e interagir no mesmo ambiente virtual (ou seja, jogo) em uma rede ou servidor compartilhado. A Sony também acrescentou que em algumas implementações do sistema, o servidor de jogos pode fazer parte de um sistema de jogos em nuvem que “renderiza e transmite vídeo” entre cada dispositivo do usuário.