Sony Tradutor de linguagem de sinais no jogo de patentes

Patente da Sony: o tradutor de linguagem de sinais no jogo permite que jogadores surdos e mudos joguem!

A Sony apresentou uma patente que visa proporcionar uma melhor experiência de jogo para jogadores surdos e mudos. A patente demonstra tecnologia que pode traduzir uma linguagem de sinais para outra linguagem de sinais do jogo em tempo real.

Uso de equipamentos de VR e jogos em nuvem para obter tradução em tempo real

A patente da Sony, intitulada “Tradução de linguagem de sinais em ambientes virtuais”, descreve uma tecnologia que pode traduzir a linguagem de sinais americana (ASL) para a linguagem de sinais japonesa (JSL) em tempo real para compreensão por falantes de japonês.

A Sony pretende construir um sistema que ajude os jogadores surdos, traduzindo os diálogos em linguagem de sinais do jogo em tempo real. A tecnologia descrita na patente permitiria a comunicação em linguagem de sinais em tempo real por meio de um indicador virtual ou avatar exibido na tela. O sistema primeiro traduz os gestos de um idioma em texto, depois converte o texto em outro idioma especificado e, finalmente, traduz os dados recebidos em gestos em outro idioma.

"As modalidades da presente divulgação referem-se a métodos e sistemas para capturar a linguagem de sinais de um usuário (por exemplo, uma pessoa japonesa) e traduzir a linguagem de sinais para outro usuário (por exemplo, um falante de inglês)", descreve a Sony no patente. "Como as línguas de sinais variam de acordo com a origem regional, as línguas de sinais não são universais. Isso requer a captura adequada da linguagem de sinais de um usuário, a compreensão de sua língua nativa e a geração de uma nova linguagem de sinais para outro usuário como saída em sua linguagem de sinais nativa. "

A Sony deu um exemplo de que o sistema pode ser implementado através de equipamentos VR ou head-mounted displays (HMD). “Em algumas modalidades, o HMD se conecta a um dispositivo de usuário, como um computador pessoal, console de jogo ou outro dispositivo de computação, por meio de uma conexão com ou sem fio”, detalha a Sony. “Em algumas modalidades, o dispositivo do usuário renderiza gráficos exibidos através do HMD, proporcionando ao usuário uma experiência de visualização imersiva do ambiente virtual

A Sony propôs ainda que um dispositivo de usuário possa se comunicar perfeitamente com outro dispositivo de usuário no servidor de jogo por meio da rede. “Em algumas modalidades, o servidor do jogo realiza uma sessão compartilhada do videogame, mantém o estado canônico do videogame e seu ambiente virtual”, disse a Sony, “e o estado do dispositivo do usuário em relação ao ambiente virtual é sincronizado”.

Com esta configuração, os usuários podem compartilhar e interagir uns com os outros no mesmo ambiente virtual (ou seja, jogo) em uma rede ou servidor compartilhado. A Sony também disse que em algumas implementações do sistema, o servidor de jogos poderia fazer parte de um sistema de jogos em nuvem que poderia “renderizar e transmitir vídeo” entre cada dispositivo do usuário.