Neues Roboter-Telekinese-System übersetzt Aktionen per Kamera

Kontrollierbar Roboter eine vielversprechende Zukunft für uns, aber die aktuellen Modelle von heute können für ungeschulte Benutzer schwierig zu kontrollieren sein. Sie beinhalten oft komplexe Elektronik, die manipulieren muss, aber das wird sich mit dem System ändern, das von einer Gruppe von Forschern an der Carnegie Mellon University gestartet wurde – robotische Telekinese.

Neben der Fähigkeit, den Roboter fernzusteuern, ist eine weitere aufregende Neuigkeit dieses Roboter-Telekinese-Systems seine Fähigkeit, die Aktion des Benutzers über ein RGB zu übersetzen Kamera. Die Roboterhand und -arm replizieren die Aktion, indem sie einfach eine bestimmte Aktion demonstrieren. Dies unterscheidet es von den vorherigen Erfindungen, die üblicherweise komplizierte Systeme verwenden, um Roboter zu steuern, wie Fernbedienungen und andere Geräte.

„Frühere Arbeiten in diesem Bereich beruhen entweder auf Handschuhen, Bewegungsmarkern oder einem kalibrierten Multikamera-Setup“, sagte Deepak Pathak, einer der Forscher des Teams TechXplore. „Stattdessen arbeitet unser System mit einer einzigen unkalibrierten Kamera. Da keine Kalibrierung erforderlich ist, kann der Benutzer überall stehen und den Roboter dennoch erfolgreich teleoperieren.“

Was das System des Roboters laut Pathak sogar bemerkenswert macht, ist die Tatsache, dass es vollständig mit nur einer Reihe von trainiert wurde YouTube Videos, die Personen zeigen, die Armbewegungen ausführen. Pathak sagte, dass es einfache zweidimensionale Bilder analysieren kann, was es zu einer unglaublich unkomplizierten Technologie für jedermann macht – sogar für eine ungeübte Person. Er sagte, dass sich das Team auf Computer Vision und die Schätzung der menschlichen Pose in 3D konzentrieren müsse.

„Die Vielfalt riesiger passiver Videodaten hilft dabei, über ungeschulte Benutzer, Aufgaben und Objekte hinweg zu funktionieren“, erklärte Pathak. „Unser System bietet eine kostengünstige und natürliche Möglichkeit, Roboter durch Demonstrationen zu lehren, anstatt den Roboter kinästhetisch zu halten oder einen Handschuh oder Motion-Capture-Anzug zu tragen … Hoffentlich ist unsere jüngste Arbeit nur eine von vielen zukünftigen Richtungen, in denen Internetvideos wirken als eine reichhaltige Überwachungsquelle für die Robotersteuerung, zusätzlich zur Robotervision.“

Bei all diesen Dingen glauben die Forscher, dass die Technologie in alltäglichen Situationen nützlich sein kann, insbesondere bei Aufgaben, die für die Anwesenheit eines Menschen gefährlich sein können. 

„Robotertelekinese und ähnliche Technologien werden das Unterrichten von Robotern in einer größeren Vielfalt von Umgebungen ermöglichen, einschließlich in Haushalten, wo erwartet wird, dass sie alltägliche Aufgaben ausführen.“ Pathak sagte: „Mit nur einer einzigen unkalibrierten Kamera kann unser System theoretisch von überall auf der Welt aus gesteuert werden, wodurch das Roboterlernen für jedermann zugänglicher wird. Wir sammeln jetzt umfangreiche Daten mit unserem Roboter-Telekinese-System, um dem Roboter beizubringen, in der realen Welt autonom zu handeln und sich anzupassen.“