Microsoft vyskúša ChatGPT na robotoch a výsledky sú pôsobivé

Výskumníci v Microsofte nedávno testovaný ChatGPT na robotických ramenách, dronoch a robotoch domáceho asistenta. Spoločnosť zdieľala, že všeobecný záver experimentu priniesol vynikajúce výsledky, čo znamená svetlú budúcnosť pre ChatGPT v oblasti robotiky.

Príchod ChatGPT signalizoval zrod modernej éry AI na celom svete. Potom, čo Microsoft oznámil integráciu jazykového modelu AI do Bing, iné spoločnosti ako Google začali zdieľať svoje vlastné diela, ktoré sa točia okolo techniky. Hrsť čínske firmy boli tiež hlásené, že skúmali a vyvíjali svoje vlastné projekty podobné ChatGPT. Vďaka tomu si Microsoft uvedomil, že jediný spôsob, ako zostať na vrchole tejto hry, je ísť vpred a aplikovať ChatGPT v iných oblastiach: robotika.

V práci zdieľanej skupinou Microsoft Autonomous Systems and Robotics Research Group, ChatGPT dostali rôzne úlohy pomocou rôznych platforiem. Testy tiež zahŕňali rôzne princípy návrhu, vrátane špeciálnych výziev, API na vysokej úrovni a ľudskej spätnej väzby prostredníctvom textov. Skupina uviedla, že hoci táto technológia „stále potrebuje pomoc“, výsledky projektu dokázali, že „ChatGPT dokáže veľa sám o sebe“.

„Na základe nášho súboru princípov dizajnu môže ChatGPT generovať kód pre scenáre robotiky,“ zdieľala skupina. „Bez akéhokoľvek dolaďovania využívame znalosti LLM (veľký jazykový model) na riadenie rôznych tvarových faktorov robotov pre rôzne úlohy.“

Jedným z testov vykonaných v rámci projektu bolo poskytnutie kontroly ChatGPT dronu a simulátoru Microsoft AirSim. V niektorých zdieľaných videách bol ChatGPT schopný vykonávať príkazy od nájdenia nápoja, identifikácie nápoja na základe popisov a navrhnutia „zdravej možnosti“. Podarilo sa mu tiež úspešne dodržať textový príkaz urobiť si selfie pred reflexným povrchom a skontrolovať poličku podľa vzoru kosačky. Pri použití v scenári simulovanej priemyselnej inšpekcie výskumníci oznámili priaznivé výsledky v teste vyhýbania sa vzdušným prekážkam a dodali, že „bol schopný efektívne analyzovať zámer a geometrické podnety používateľa na presné ovládanie dronu“.

V neuveriteľnejšom scenári, ChatGPT prešiel testom manipulácie tým, že poskladal bloky a použil ich na vytvorenie štvorfarebného loga spoločnosti Microsoft pomocou svojej vedomostnej základne.

"Použili sme konverzačnú spätnú väzbu, aby sme model naučili, ako skladať pôvodne poskytnuté API do zložitejších funkcií na vysokej úrovni: ktoré ChatGPT kóduje sám," vysvetlila skupina. „...Model ukázal fascinujúci príklad prepojenia textovej a fyzickej domény, keď mal za úlohu postaviť logo Microsoftu z drevených kociek. Nielenže si dokázala vybaviť logo zo svojej internej vedomostnej základne, ale dokázala „nakresliť“ logo (ako kód SVG) a potom použiť vyššie naučené zručnosti na to, aby zistila, ktoré existujúce akcie robota môžu vytvoriť jeho fyzickú podobu. “

Zatiaľ čo výsledky projektu vyzerajú sľubne, Microsoft zdôraznil, že práca je „len malý zlomok“ vecí, ktoré sa dajú urobiť, keď sa na robotoch používajú veľké jazykové modely. Okrem toho spoločnosť pripomenula, že ChatGPT ešte nie je úplne pripravený pomáhať robotom pri vykonávaní úloh, varuje nadšencov a iných výskumníkov, aby „vždy prijali potrebné bezpečnostné opatrenia“.