Microsoft Research zeigt, wie die Gestenerkennung in alltäglichen Apps eingesetzt werden kann

Microsoft Research Labor für fortgeschrittene Technologien in Israel arbeitet an einem Forschungsprojekt namens Project Prague, das es App-Entwicklern ermöglichen wird, grundlegende Handgestenunterstützung ohne großen Aufwand in ihre Anwendungen zu integrieren. Sie können auch benutzerdefinierte Gesten für ihre eigenen Apps oder andere Produkte mit sehr wenig zusätzlicher Programmierung oder Fachkenntnissen erstellen.

Angenommen, Sie sprechen mit einem Kollegen über Skype und möchten den Anruf beenden. Was wäre, wenn Sie, anstatt mit Ihrer Maus oder Tastatur auf eine Schaltfläche zu klicken, einfach den Hörer auflegen könnten?

Müssen Sie Ihren Computerbildschirm schnell sperren? Was wäre, wenn Sie, anstatt Fenster zu schließen und Tastenkombinationen zu drücken, einfach die Hand ausstrecken und die Geste nachahmen, einen Schlüssel in einem Schloss zu drehen?

Project Prague nutzt maschinelles Lernen, um Systeme zu trainieren, Bewegungen zu erkennen, und läuft mit einer 3D-Kamera für den Einzelhandel. MSR hat Millionen von Handbildern aufgezeichnet und diesen Datensatz dann verwendet, um die Technologie so zu trainieren, dass sie jede mögliche Handhaltung und -bewegung erkennt.

Eyal Krupka, ein leitender angewandter Forscher und Leiter der Computer Vision- und maschinellen Lernforschung des Labors, sagte, dass die Technologie dann Hunderte von Mikroeinheiten für künstliche Intelligenz verwendet, von denen jede einen einzelnen Aspekt der Hand des Benutzers analysiert, um jede Geste genau zu interpretieren.

Das Endergebnis ist ein System, das nicht nur die Hand einer Person erkennt, sondern auch die Absicht dieser Person versteht.

Lesen Sie mehr über dieses Projekt hier.