Kinect ใหม่สามารถอ่านภาษามือของมนุษย์ได้อย่างง่ายดาย

Microsoft Kinect กำลังสร้างการปฏิวัติในด้าน Natural User Interface กล้องความลึก 3D ราคาประหยัดอย่าง Kinect เปิดโอกาสให้กับโลกคอมพิวเตอร์ของเราได้อย่างไม่รู้จบ ภาษามือเป็นภาษาหลักสำหรับคนหูหนวกและผู้มีปัญหาทางการได้ยินจำนวนมาก แต่ในปัจจุบัน คนเหล่านี้ไม่สามารถโต้ตอบกับคอมพิวเตอร์โดยใช้ภาษาแม่ของตนได้ Microsoft Research Asia ได้พัฒนาระบบโดยใช้ Kinect ซึ่งสามารถตรวจจับภาษามือที่คนเหล่านี้ใช้และทำงานได้ดี

นี่คือข้อมูลบางส่วนเกี่ยวกับโครงการ

Kinect ด้วยความสามารถในการให้ข้อมูลความลึกและข้อมูลสีพร้อมกัน ทำให้ง่ายต่อการติดตามการเคลื่อนไหวของมือและร่างกายได้อย่างแม่นยำและรวดเร็วยิ่งขึ้น

ในโครงการนี้—ซึ่งกำลังแสดงในช่วง เดโมเฟส ส่วนหนึ่งของ การประชุมสุดยอดคณะ 2013ซึ่งนำนักวิจัยเชิงวิชาการมากกว่า 400 คนมาที่สำนักงานใหญ่ของ Microsoft เพื่อแบ่งปันข้อมูลเชิงลึกเกี่ยวกับการวิจัยที่มีผลกระทบ—การติดตามด้วยมือนำไปสู่กระบวนการของการจัดแนวแนวการเคลื่อนที่แบบสามมิติและการจับคู่คำแต่ละคำในภาษามือ คำถูกสร้างขึ้นผ่านการติดตามด้วยมือโดย Kinect สำหรับ Windows ซอฟต์แวร์แล้วทำให้เป็นมาตรฐานและคำนวณคะแนนการจับคู่เพื่อระบุผู้สมัครที่เกี่ยวข้องมากที่สุดเมื่อวิเคราะห์คำที่ลงนามแล้ว

ในทางกลับกัน อัลกอริธึมสำหรับการจับคู่วิถีโคจรสามมิตินี้ ได้เปิดใช้งานการสร้างระบบสำหรับการรู้จำและการแปลภาษามือ ซึ่งประกอบด้วยสองโหมด โหมดแรกคือโหมดการแปลจะแปลภาษามือเป็นข้อความหรือคำพูด ปัจจุบันเทคโนโลยีรองรับภาษามือแบบอเมริกัน แต่มีศักยภาพสำหรับภาษามือทุกประเภท

ประการที่สอง โหมดการสื่อสาร ช่วยให้สามารถสื่อสารระหว่างบุคคลที่ได้ยินกับคนหูหนวกหรือคนหูตึงได้โดยใช้อวาตาร์ อวาตาร์สามารถแสดงประโยคภาษามือที่สอดคล้องกันได้โดยใช้การป้อนข้อความจากแป้นพิมพ์ คนหูหนวกหรือคนหูตึงตอบสนองโดยใช้ภาษามือ และระบบจะแปลงคำตอบนั้นเป็นข้อความ

อ่านเพิ่มเติมจากลิงค์ด้านล่าง

ที่มา: ไมโครซอฟท์