Дослідження Microsoft демонструє механічну клавіатуру з розпізнаванням руху, розпізнає жести типу, наведення курсора та гортання

Обкладинки Microsoft Surface Touch 2dn покоління вже підтримують жести. Але ви повинні виконувати жести на клавіатурі. Цей новий проект від Microsoft Research дозволить вам виконувати жести над клавіатурою, навіть не торкаючись їх. Такий досвід користувача забезпечується матрицею інфрачервоних (ІЧ) датчиків наближення з низькою роздільною здатністю між клавішами механічної клавіатури. Перегляньте демонстраційне відео вище.

Ми представляємо новий тип розширеної механічної клавіатури, яка відчуває насичені та виразні жести, які виконуються як на пристрої, так і безпосередньо над ним. Матриця інфрачервоних (ІЧ) датчиків наближення з низькою роздільною здатністю перемежовується з клавішами звичайної механічної клавіатури. Це призводить до грубих даних про рух, але з високою частотою кадрів. Ми розширюємо алгоритм машинного навчання, який традиційно використовується лише для статичної класифікації, щоб надійно підтримувати динамічні тимчасові жести. Ми пропонуємо використовувати сигнатури руху – техніку, яка використовує пари зображень історії руху та класифікатор випадкового лісу для надійного розпізнавання великого набору жестів руху. Наша техніка досягає середньої точності класифікації за кадром 75:6% при перехресній перевірці залишення-один-суб'єкт-не і 89:9% у перехресній перевірці напівтесту/напівнавчання. Ми детально описуємо апаратне забезпечення та алгоритм розпізнавання жестів, надаємо результати точності та демонструємо великий набір жестів, призначених для виконання за допомогою пристрою. Завершуємо якісним відгуком користувачів, обговоренням обмежень та напрямків майбутньої роботи.

через: @h0xod