Microsoft Research pokazuje, jak można używać rozpoznawania gestów w codziennych aplikacjach

Badania firmy Microsoft Laboratorium Zaawansowanych Technologii w Izraelu pracuje nad projektem badawczym o nazwie Project Prague, który pozwoli twórcom aplikacji na włączenie podstawowej obsługi gestów dłoni do ich aplikacji bez większego nakładu pracy. Mogą również tworzyć niestandardowe gesty dla własnych aplikacji lub innych produktów, przy bardzo niewielkim dodatkowym programowaniu lub wiedzy.

Załóżmy, że rozmawiasz z kolegą przez Skype i możesz zakończyć rozmowę. Co by było, gdyby zamiast używać myszy lub klawiatury do klikania przycisku, można po prostu wykonać ruch polegający na odłożeniu telefonu?

Chcesz szybko zablokować ekran komputera? Co by było, gdyby zamiast szarpać się, by zamykać okna i naciskać skróty klawiszowe, po prostu wyciągasz rękę i naśladujesz gest przekręcania klucza w zamku?

Project Prague wykorzystuje uczenie maszynowe do trenowania systemów rozpoznawania ruchów, działa przy użyciu kamery 3D dostępnej w sprzedaży detalicznej. Firma MSR zarejestrowała miliony obrazów dłoni, a następnie wykorzystała ten zestaw danych do wytrenowania technologii w zakresie rozpoznawania każdej możliwej pozycji i ruchu dłoni.

Eyal Krupka, główny badacz stosowany i kierownik laboratorium badań nad wizją komputerową i uczeniem maszynowym, powiedział, że technologia wykorzystuje następnie setki mikrojednostek sztucznej inteligencji, z których każda analizuje pojedynczy aspekt dłoni użytkownika, aby dokładnie zinterpretować każdy gest.

Efektem końcowym jest system, który nie tylko rozpoznaje rękę osoby, ale także rozumie jej intencje.

Przeczytaj więcej o tym projekcie tutaj.