Google працює над дешевим відстеженням рук на основі штучного інтелекту для Google Glass

Відстеження рук корисно в програмах доповненої реальності, оскільки воно забезпечує простий у використанні природний користувальницький інтерфейс для взаємодії з цифровою інформацією, але зазвичай вимагає спеціальних датчиків глибини та інших процесорних і дорогих технологій.

Бачення Google доповненої реальності, яка використовує легкі навушники, схожі на окуляри, а не HoloLens, схожі на шолом, не може вмістити такі датчики, і сьогодні ми повідомляємо про новий підхід до відстеження рук, який використовує лише фронтальну камеру та вбудований штучний інтелект. -обробка на основі для надзвичайно точного відстеження рук.

Основним нововведенням у цій технології є використання звичайного алгоритму для визначення долоні, а потім використання моделі на основі штучного інтелекту для прогнозування положення пальців.

Команда випускає код як кросплатформний фреймворк під назвою MediaPiPe.

«Ми сподіваємося, що надання цієї функціональності сприйняття руки для широкої спільноти досліджень і розробників призведе до появи креативних варіантів використання, стимулюючи нові додатки та нові шляхи дослідження», — написала команда в блозі.

MediaPipe може відображати до 21 точки на руці та пальцях з точністю до 96% і робити все це на мобільному пристрої (тобто не в хмарі), відкриваючи можливість використання технології в інших програмах, таких як керування додатками на ваш смартфон.

Ми припускаємо, що Google також може використовувати його на своїх ексклюзивних пристроях, оскільки Pixel 4 вже містить радарний датчик Soli для керування жестами.

В ідеалі, однак, розробка дозволила б легко та дешево створювати насичені можливості AR і, сподіваюся, дозволила б створювати дешеві, але потужні окуляри AR.

Прочитайте всі деталі в Google тут.

через Наступна реальність