A Sony registrou um pedido de patente para fornecer melhores recursos de acessibilidade em jogos para jogadores surdos e mudos. A patente mostra como certas línguas de sinais podem ser traduzidas em tempo real para outra língua de sinais do jogo.
A Sony registrou uma patente para adicionar tradução em linguagem de sinais em tempo real aos videogames. A patente, intitulada "Interpretação de Linguagem de Sinais em Ambientes Virtuais", demonstra tecnologia que pode traduzir a Linguagem de Sinais Americana (ASL) para a Linguagem de Sinais Japonesa (JSL) usada por falantes de japonês.
A Sony afirma que seu objetivo é construir um sistema que auxilie jogadores surdos, traduzindo a linguagem de sinais em tempo real durante conversas no jogo. A tecnologia descrita na patente permitiria que indicadores virtuais ou avatares exibidos na tela se comunicassem em linguagem de sinais em tempo real. O sistema primeiro traduz os gestos de um idioma em texto, depois converte o texto em outro idioma especificado e, finalmente, traduz os dados recebidos em gestos em outro idioma.
"As modalidades da presente divulgação referem-se a métodos e sistemas para capturar a linguagem de sinais de um usuário (por exemplo, uma pessoa japonesa) e traduzir a linguagem de sinais para outro usuário (por exemplo, um falante de inglês)", descreve a Sony no patente. "Como as línguas de sinais variam dependendo de sua origem regional, as línguas de sinais não são línguas universais. Isso requer capturar adequadamente a linguagem de sinais de um usuário, compreender sua língua nativa e gerar uma nova linguagem de sinais como saída para outro usuário, apresentada em sua linguagem de sinais nativa."
Como explica a Sony, uma maneira de implementar esse sistema é com a ajuda de um dispositivo do tipo VR ou de um head-mounted display (HMD). “Em algumas modalidades, o HMD se conecta a um dispositivo de usuário, como um computador pessoal, console de jogo ou outro dispositivo de computação, por meio de uma conexão com ou sem fio”, detalha a Sony. “Em algumas modalidades, o dispositivo do usuário renderiza gráficos exibidos através do HMD, proporcionando ao usuário uma experiência de visualização imersiva do ambiente virtual
A Sony propôs ainda que um dispositivo de usuário possa se comunicar perfeitamente com outro dispositivo de usuário no servidor de jogo por meio da rede. “Em algumas modalidades, o servidor de jogo realiza uma sessão compartilhada do videogame, mantém o estado canônico do videogame e seu ambiente virtual”, disse a Sony, “e o dispositivo do usuário sincroniza com isso em relação ao estado do ambiente virtual ."
Com esta configuração, os usuários podem compartilhar e interagir no mesmo ambiente virtual (ou seja, jogo) em uma rede ou servidor compartilhado. A Sony também acrescentou que, em algumas modalidades do sistema, o servidor de jogos pode fazer parte de um sistema de jogos em nuvem que “renderiza e transmite vídeo” entre cada dispositivo do usuário.