マイクロソフトは手話認識の研究を改善するためにコミュニティの力を利用します

重度の難聴を持つ360億2012万人以上の人々が毎日手話を使用しています。 ほとんどの聴覚障害者は手話を理解していないため、難聴のある人とリアルタイムで書面によるコミュニケーションをとることができません。 この問題を解決するために、Microsoft ResearchはXNUMX年XNUMX月に、中国科学院（CAS）および北京ユニオン大学と共同でKinect手話プロジェクトを開始しました。 彼らは、手話をコンピューターで話す言葉に変え、同時に話された言葉をアバターによってレンダリングされる手話に変えることによって、手話と非手話の参加者の間でリアルタイムの会話を可能にするKinect手話翻訳者と呼ばれるツールを開発しました。

今、彼らは最近始めました Kinect手話ワーキンググループ 手話認識の研究を進めるためのコミュニティ。

最初のステップとして、中国手話データベースであるDEVISIGNを学界に公開します。 によって編集 視覚情報処理と学習 コンピューティングテクノロジー研究所の（VIPL）グループは、Microsoft Research Asiaの支援を受けて、4,400人の署名者（331,050人の男性と30人の女性）からの13個の語彙データに基づいて、約17の標準的な中国手話の単語をカバーしています。 語彙データは、RGBビデオ（AVI形式）と深度およびスケルトン情報（BIN形式）で構成されます。 したがって、DEVISIGNは、手話研究者に、アルゴリズムのトレーニングと評価、および未知の署名者に適応するようにシステムをトレーニングするためのソリューションなど、最先端の実用的なアプリケーションを作成するための豊富なデータストアを提供します。

以下のリンクから詳細をお読みください。

情報源： MSR