Nowy robotyczny system telekinezy tłumaczy działania za pomocą kamery

Sterowny roboty mają dla nas obiecującą przyszłość, ale dzisiejsze modele mogą być trudne do kontrolowania dla nieprzeszkolonych użytkowników. Często wymagają one skomplikowanej elektroniki do manipulowania, ale to się wkrótce zmieni wraz z systemem uruchomionym przez grupę naukowców z Carnegie Mellon University – telekineza robotyczna.

Oprócz możliwości zdalnego sterowania robotem, kolejną ekscytującą wiadomością o tym zrobotyzowanym systemie telekinezy jest możliwość tłumaczenia działań użytkownika za pomocą RGB aparat fotograficzny. Robotyczna ręka i ramię będą odtwarzać akcję, po prostu demonstrując konkretną akcję. To odróżnia ją od poprzednich wynalazków, które powszechnie wykorzystują skomplikowane systemy do sterowania robotami, takie jak piloty i inne urządzenia.

„Wcześniejsze prace w tej dziedzinie opierają się na rękawiczkach, markerach ruchu lub skalibrowanej konfiguracji z wieloma kamerami” – powiedział Deepak Pathak, jeden z badaczy zespołu. TechXplore. „Zamiast tego nasz system działa przy użyciu jednej nieskalibrowanej kamery. Ponieważ nie jest potrzebna kalibracja, użytkownik może stać w dowolnym miejscu i nadal skutecznie zdalnie sterować robotem.”

Według Pathaka to, co sprawia, że ​​system robota jest niezwykły, to fakt, że został on w całości przeszkolony za pomocą zaledwie serii YouTube filmy przedstawiające osoby wykonujące czynności ramion. Pathak powiedział, że może analizować proste dwuwymiarowe obrazy, co czyni go niezwykle prostą technologią dla każdego – nawet osoby niewprawnej. Powiedział, że zespół musi skoncentrować się na wizji komputerowej i szacowaniu ludzkiej pozy w 3D.

„Różnorodność ogromnych pasywnych danych wideo pomaga w pracy z nieprzeszkolonymi użytkownikami, zadaniami i obiektami” — stwierdził Pathak. „Nasz system oferuje tani i naturalny sposób uczenia robotów poprzez demonstracje, w przeciwieństwie do kinestetycznego trzymania robota lub noszenia rękawicy lub kombinezonu do przechwytywania ruchu… Mamy nadzieję, że nasza ostatnia praca to tylko jeden z wielu przyszłych kierunków, w których będą działać filmy internetowe jako bogate źródło nadzoru dla sterowania robotami, oprócz robotycznej wizji.”

Biorąc to wszystko pod uwagę, naukowcy uważają, że technologia może być przydatna w codziennych sytuacjach, zwłaszcza w zadaniach, które mogą być niebezpieczne dla obecności człowieka. 

„Telekineza robotyczna i podobne technologie umożliwią uczenie robotów w większej różnorodności ustawień, w tym w gospodarstwach domowych, gdzie będą wykonywać codzienne zadania”. Pathak powiedział: „Używając tylko jednej nieskalibrowanej kamery, nasz system może teoretycznie być sterowany z dowolnego miejsca na świecie, dzięki czemu nauczanie robotów jest bardziej dostępne dla każdego. Obecnie zbieramy dane na dużą skalę za pomocą naszego zrobotyzowanego systemu telekinezy, aby nauczyć robota samodzielnego działania i adaptacji w rzeczywistym świecie”.