Google lucrează la urmărirea mâinilor ieftină bazată pe inteligență artificială pentru Google Glass

Urmărirea mâinilor este utilă în aplicațiile de realitate augmentată, deoarece oferă o interfață de utilizator naturală ușor de utilizat pentru a interacționa cu informațiile digitale, dar în mod normal necesită senzori speciali de adâncime și alte tehnologii costisitoare și consumatoare de procesoare.

Viziunea Google despre realitatea augmentată, care folosește căști ușoare asemănătoare ochelarilor, mai degrabă decât HoloLens asemănător căștii, nu poate găzdui astfel de senzori, iar astăzi raportăm despre o nouă abordare a urmăririi mâinilor care folosește doar camera frontală și AI la bord. -prelucrare bazată pentru a face urmărirea mâinilor remarcabil de precisă.

Principala inovație în tehnologie este utilizarea unui algoritm convențional pentru a detecta palma și apoi utilizarea unui model bazat pe inteligență artificială pentru a prezice poziția degetelor.

Echipa lansează codul ca un cadru multiplatform numit MediaPiPe.

„Sperăm că furnizarea acestei funcționalități de percepție a mâinii către comunitatea mai largă de cercetare și dezvoltare va avea ca rezultat apariția unor cazuri de utilizare creative, stimulând noi aplicații și noi căi de cercetare”, a scris echipa într-o postare pe blog.

MediaPipe poate mapa până la 21 de puncte de pe mână și degete cu o precizie de până la 96% și poate face totul pe un dispozitiv mobil (adică nu în cloud), deschizând posibilitatea de a utiliza tehnologia în alte aplicații, cum ar fi controlul aplicațiilor pe smartphone-ul tău.

Ne imaginăm că Google îl poate folosi și pe dispozitivele sale exclusive, Pixel 4 incluzând deja senzorul radar Soli pentru controlul gesturilor.

În mod ideal, totuși, dezvoltarea ar face ușoară și ieftină crearea de experiențe AR bogate și, sperăm, să permită crearea de ochelari AR ieftini, dar puternici.

Citiți toate detaliile la Google aici.

Prin intermediul Următoarea realitate