مایکروسافت از قدرت جامعه برای بهبود تحقیقات در تشخیص زبان اشاره استفاده می کند

بیش از 360 میلیون نفر با کم شنوایی شدید هر روز از زبان اشاره استفاده می کنند. از آنجایی که بیشتر افراد شنوا زبان اشاره را نمی‌فهمند، نمی‌توانند در زمان واقعی و نانوشته با افراد کم‌شنوایی ارتباط برقرار کنند. برای حل این مشکل، تحقیقات مایکروسافت در فوریه 2012 پروژه زبان اشاره Kinect را با همکاری آکادمی علوم چین (CAS) و دانشگاه اتحادیه پکن آغاز کرد. آنها ابزاری به نام Kinect Sign Translator توسعه داده اند که با تبدیل زبان اشاره به کلماتی که توسط رایانه صحبت می شود و همزمان کلمات گفتاری را به زبان اشاره که توسط یک آواتار ارائه می شود، مکالمات بی درنگ بین شرکت کنندگان امضاکننده و غیر امضاکننده را امکان پذیر می کند.

اکنون آنها به تازگی شروع به کار کرده اند کارگروه زبان اشاره کینکت جامعه برای پیشبرد تحقیقات در زمینه تشخیص زبان اشاره

به عنوان اولین قدم، ما پایگاه داده زبان اشاره چینی DEVISIGN را به روی دانشگاه ها باز می کنیم. گردآوری شده توسط پردازش و یادگیری اطلاعات بصری گروه (VIPL) موسسه فناوری محاسبات، تحت حمایت مالی Microsoft Research Asia، DEVISIGN حدود 4,400 کلمه استاندارد زبان اشاره چینی را بر اساس 331,050 قطعه داده واژگانی از 30 امضاکننده (13 مرد و 17 زن) پوشش می دهد. داده‌های واژگان شامل ویدیوی RGB (در فرمت AVI) و اطلاعات عمق و اسکلت (در قالب BIN) است. بنابراین DEVISIGN به محققان زبان اشاره، ذخیره‌ای غنی از داده‌ها را برای آموزش و ارزیابی الگوریتم‌هایشان و برای ایجاد کاربردهای عملی پیشرفته، مانند راه‌حل‌هایی برای آموزش سیستم برای انطباق با یک امضاکننده ناشناخته، ارائه می‌کند.

اطلاعات بیشتر در مورد آن را از لینک زیر بخوانید.

منبع: MSR