Microsoft는 수화 인식 연구를 개선하기 위해 커뮤니티의 힘을 활용합니다.

심각한 난청을 가진 360억 2012천만 명 이상의 사람들이 매일 수화를 사용합니다. 대부분의 청각 장애인은 수화를 이해하지 못하기 때문에 청각 장애인과 실시간으로 서면으로 의사 소통을 할 수 없습니다. 이 문제를 해결하기 위해 Microsoft Research는 XNUMX년 XNUMX월 CAS(Chinese Academy of Sciences) 및 Beijing Union University와 공동으로 Kinect 수화 프로젝트를 시작했습니다. 키넥트 수화 번역기라는 도구를 개발하여 수화를 컴퓨터가 말하는 단어로 변환하는 동시에 음성을 아바타가 렌더링하는 수화로 변환하여 서명 참가자와 서명하지 않은 참가자 간의 실시간 대화를 가능하게 하는 도구를 개발했습니다.

이제 그들은 최근에 시작했습니다. Kinect 수화 워킹 그룹 커뮤니티에서 수화 인식 연구를 진행합니다.

그 첫걸음으로 중국어 수화 데이터베이스 DEVISIGN을 학계에 공개합니다. 에 의해 컴파일 시각 정보 처리 및 학습 Microsoft Research Asia의 후원 하에 컴퓨팅 기술 연구소(Institute of Computing Technology)의 (VIPL) 그룹인 DEVISIGN은 서명자 4,400명(남성 331,050명, 여성 30명)의 13개 어휘 데이터를 기반으로 약 17개의 표준 중국어 수화 단어를 다룹니다. 어휘 데이터는 RGB 비디오(AVI 형식)와 깊이 및 골격 정보(BIN 형식)로 구성됩니다. 따라서 DEVISIGN은 수화 연구원에게 알고리즘을 교육 및 평가하고 알 수 없는 서명자에게 적응하도록 시스템을 교육하기 위한 솔루션과 같은 최첨단 실용적인 응용 프로그램을 만들기 위한 풍부한 데이터 저장소를 제공합니다.

아래 링크에서 자세히 읽어보세요.

출처: MSR