Google pracuje na levném sledování rukou založeném na umělé inteligenci pro Google Glass

Sledování ruky je užitečné v aplikacích rozšířené reality, protože poskytuje snadno použitelné přirozené uživatelské rozhraní pro interakci s digitálními informacemi, ale normálně vyžaduje speciální hloubkové senzory a další a drahé technologie náročné na procesor.

Vize rozšířené reality společnosti Google, která používá lehké brýlové náhlavní soupravy spíše než HoloLens podobné helmě, nemůže takové senzory pojmout, a dnes informujeme o novém přístupu ke sledování ruky, který využívá pouze přední kameru a palubní umělou inteligenci. zpracování založené na pozoruhodně přesném sledování ruky.

Hlavní inovací v této technologii je použití konvenčního algoritmu k detekci dlaně a následné použití modelu založeného na AI k předpovědi polohy prstů.

Tým uvolňuje kód jako multiplatformní rámec s názvem MediaPiPe.

„Doufáme, že poskytnutí této funkce vnímání ruky širší výzkumné a vývojové komunitě povede ke vzniku kreativních případů použití, stimulujících nové aplikace a nové výzkumné cesty,“ napsal tým v blogovém příspěvku.

MediaPipe dokáže mapovat až 21 bodů na ruce a prstech s přesností až 96 % a to vše na mobilním zařízení (tj. ne v cloudu), čímž otevírá možnost využití technologie v jiných aplikacích, jako je ovládání aplikací na váš smartphone.

Představujeme si, že jej Google může také použít na svých exkluzivních zařízeních, přičemž Pixel 4 již obsahuje radarový senzor Soli pro ovládání gesty.

V ideálním případě by však vývoj usnadnil a zlevnil vytváření bohatých AR zážitků a doufejme, že by umožnil vytvoření levných, ale výkonných AR brýlí.

Přečtěte si všechny podrobnosti zde Google.

Přes Další realita