Google arbeitet an einem günstigen KI-basierten Handtracking für Google Glass

Hand-Tracking ist in Augmented-Reality-Anwendungen nützlich, da es eine einfach zu bedienende natürliche Benutzeroberfläche für die Interaktion mit digitalen Informationen bietet, aber normalerweise spezielle Tiefensensoren und andere prozessorintensive und teure Technologien erfordert.

Googles Vision von Augmented Reality, die leichte brillenähnliche Headsets anstelle der helmähnlichen HoloLens verwendet, kann solche Sensoren nicht aufnehmen, und heute berichten wir über einen neuen Ansatz zur Handverfolgung, der nur die nach vorne gerichtete Kamera und die integrierte KI verwendet -basierte Verarbeitung für eine bemerkenswert genaue Handverfolgung.

Die wichtigste Neuerung in der Technologie ist die Verwendung eines herkömmlichen Algorithmus zur Erkennung der Handfläche und die anschließende Verwendung eines KI-basierten Modells zur Vorhersage der Position der Finger.

Das Team veröffentlicht den Code als plattformübergreifendes Framework namens MediaPiPe.

„Wir hoffen, dass die Bereitstellung dieser Handwahrnehmungsfunktionalität für die breitere Forschungs- und Entwicklungsgemeinschaft zu kreativen Anwendungsfällen führen wird, die neue Anwendungen und neue Forschungswege anregen“, schrieb das Team in einem Blogbeitrag.

MediaPipe kann bis zu 21 Punkte auf der Hand und den Fingern mit bis zu 96 % Genauigkeit abbilden und das alles auf einem mobilen Gerät (d. h. nicht in der Cloud), was die Möglichkeit eröffnet, die Technologie in anderen Anwendungen zu nutzen, z. B. zur Steuerung von Anwendungen Ihr Smartphone.

Wir können uns vorstellen, dass Google es auch auf seinen exklusiven Geräten einsetzen wird, wobei das Pixel 4 bereits den Soli-Radarsensor zur Gestensteuerung enthält.

Im Idealfall würde die Entwicklung es jedoch einfach und kostengünstig machen, reichhaltige AR-Erlebnisse zu schaffen und hoffentlich die Erstellung einer billigen, aber leistungsstarken AR-Brille ermöglichen.

Lesen Sie alle Details bei Google hier.

Weitere Informationen zur Stelle und den Ansprechpartner in unserem Hause finden Sie hier: Nächste Realität