Microsoft aproveita o poder da comunidade para melhorar a pesquisa em reconhecimento de linguagem de sinais

Mais de 360 ​​milhões de pessoas com perda auditiva severa usam linguagem de sinais todos os dias. Como a maioria dos ouvintes não entende a linguagem de sinais, eles não são capazes de se comunicar em tempo real e não escrito com pessoas com perda auditiva. Para resolver esse problema, a Microsoft Research em fevereiro de 2012 iniciou o projeto Kinect Sign Language em colaboração com a Academia Chinesa de Ciências (CAS) e a Beijing Union University. Eles desenvolveram uma ferramenta chamada Kinect Sign Language Translator, que permite conversas em tempo real entre participantes sinalizantes e não sinalizantes, transformando a língua de sinais em palavras faladas por um computador e, simultaneamente, transformando palavras faladas em linguagem de sinais renderizada por um avatar.

Agora, eles começaram recentemente Grupo de Trabalho de Língua de Sinais do Kinect comunidade para avançar na pesquisa em reconhecimento de linguagem de sinais.

Como primeiro passo, estamos abrindo para a academia o DEVISIGN, Chinese Sign Language Database. Compilado pelo Processamento e Aprendizagem de Informações Visuais (VIPL) do Institute of Computing Technology, sob o patrocínio da Microsoft Research Asia, o DEVISIGN abrange cerca de 4,400 palavras padrão da Língua de Sinais Chinesa com base em 331,050 dados de vocabulário de 30 assinantes (13 homens e 17 mulheres). Os dados de vocabulário incluem vídeo RGB (no formato AVI) e informações de profundidade e esqueleto (no formato BIN). Assim, o DEVISIGN fornece aos pesquisadores de língua de sinais um rico armazenamento de dados para treinar e avaliar seus algoritmos e para criar aplicações práticas de última geração, como soluções para treinar o sistema para se adaptar a um sinalizador desconhecido.

Leia mais sobre isso no link abaixo.

Fonte: MSR