Il nuovo sistema di telecinesi robotica traduce le azioni tramite fotocamera

Controllabile robot ci riserva un futuro promettente, ma i modelli attuali di oggi possono essere difficili da controllare per utenti non addestrati. Spesso coinvolgono l'elettronica complessa da manipolare, ma le cose stanno per cambiare con il sistema avviato da un gruppo di ricercatori della Carnegie Mellon University – telecinesi robotica.

Oltre alla possibilità di controllare il robot da remoto, un'altra entusiasmante novità su questo sistema robotico di telecinesi è la sua capacità di tradurre l'azione dell'utente tramite un RGB stanza. La mano e il braccio robotici replicheranno l'azione semplicemente dimostrando un'azione specifica. Ciò lo rende diverso dalle invenzioni precedenti che utilizzano comunemente sistemi complicati per controllare i robot, come telecomandi e altri dispositivi.

"I lavori precedenti in quest'area si basano su guanti, indicatori di movimento o una configurazione multi-camera calibrata", ha detto Deepak Pathak, uno dei ricercatori del team TechXplore. “Invece, il nostro sistema funziona utilizzando un'unica fotocamera non calibrata. Poiché non è necessaria alcuna calibrazione, l'utente può essere in piedi ovunque e comunque teleoperare con successo il robot".

Secondo Pathak, ciò che rende straordinario il sistema del robot è il fatto che è stato interamente addestrato con solo una serie di YouTube video che mostrano individui che eseguono azioni con le braccia. Pathak ha affermato che è in grado di analizzare semplici immagini bidimensionali, rendendola una tecnologia incredibilmente semplice per chiunque, anche una persona inesperta. Ha detto che il team doveva concentrarsi sulla visione artificiale e sulla stima della posa umana 3D.

"La diversità di enormi dati video passivi li aiuta a funzionare su utenti, attività e oggetti non addestrati", ha affermato Pathak. "Il nostro sistema offre un modo naturale e a basso costo per insegnare ai robot tramite dimostrazioni, invece di tenere il robot cinesteticamente o indossare un guanto o una tuta per il motion capture... Si spera che il nostro lavoro recente sia solo una delle tante direzioni future in cui agiscono i video su Internet come una ricca fonte di supervisione per il controllo robotico, oltre alla visione robotica.

Con tutte queste cose, i ricercatori ritengono che la tecnologia possa essere utile nelle situazioni quotidiane, specialmente per compiti che possono essere pericolosi per la presenza di un essere umano. 

"La telecinesi robotica e tecnologie simili consentiranno l'insegnamento dei robot in una più ampia varietà di contesti, anche nelle famiglie, dove ci si aspetta che svolgano le attività quotidiane". Pathak ha affermato: "Utilizzando solo una singola telecamera non calibrata, il nostro sistema può in teoria essere controllato da qualsiasi parte del mondo, quindi rende l'insegnamento dei robot più accessibile a chiunque. Ora stiamo raccogliendo dati su larga scala utilizzando il nostro sistema di telecinesi robotica per insegnare al robot ad agire e ad adattarsi autonomamente nel mondo reale".