Microsoft zkouší ChatGPT na robotech a výsledky jsou působivé

Výzkumníci v Microsoftu nedávno testovaný ChatGPT na robotických pažích, dronech a robotech domácích asistentů. Společnost sdílela, že obecný závěr experimentu přinesl vynikající výsledky, což znamená světlou budoucnost pro ChatGPT v oblasti robotiky.

Příchod ChatGPT signalizoval zrod moderní éry AI na celém světě. Poté, co Microsoft oznámil integraci jazykového modelu AI do Bing, jiné společnosti jako Google začali sdílet svá vlastní díla točící se kolem techniky. Hrst čínské firmy byli také hlášeni, že zkoumají a vyvíjejí své vlastní projekty podobné ChatGPT. Díky tomu si Microsoft uvědomil, že jediný způsob, jak zůstat na vrcholu této hry, je jít vpřed a aplikovat ChatGPT v jiných oblastech: robotice.

V práci sdílené skupinou Microsoft Autonomous Systems and Robotics Research Group, ChatGPT dostal různé úkoly pomocí různých platforem. Testy také zahrnovaly různé principy návrhu, včetně speciálních struktur pro výzvy, API na vysoké úrovni a lidské zpětné vazby prostřednictvím textů. Skupina uvedla, že ačkoli tato technologie „stále potřebuje nějakou pomoc“, výsledky projektu ukázaly, že „ChatGPT dokáže hodně sám o sobě“.

„Dodržováním naší sady principů návrhu může ChatGPT generovat kód pro robotické scénáře,“ uvedla skupina. "Bez jakéhokoli dolaďování využíváme znalosti LLM (velký jazykový model) k ovládání různých tvarových faktorů robotů pro různé úkoly."

Jeden z testů provedených v projektu zahrnoval poskytnutí ovládání ChatGPT dronu a simulátoru Microsoft AirSim. V některých sdílených videích byl ChatGPT schopen provádět příkazy z hledání nápoje, identifikace nápoje na základě popisů a navrhování „zdravé varianty“. Podařilo se také úspěšně dodržet textový příkaz pořídit si selfie před reflexním povrchem a prohlédnout polici ve vzoru sekačky. Při použití v simulovaném scénáři průmyslové inspekce výzkumníci oznámili příznivé výsledky v testu vyhýbání se vzdušné překážce a dodali, že „byl schopen efektivně analyzovat záměr uživatele na vysoké úrovni a geometrické podněty pro přesné ovládání dronu“.

V neuvěřitelnějším scénáři ChatGPT prošel testem manipulace tím, že naskládal bloky a použil je k vytvoření čtyřbarevného loga společnosti Microsoft s pomocí své znalostní báze.

„Použili jsme konverzační zpětnou vazbu, abychom model naučili, jak skládat původně poskytnutá rozhraní API do složitějších funkcí na vysoké úrovni: které ChatGPT kóduje sám,“ vysvětlila skupina. „...Model ukázal fascinující příklad propojení textové a fyzické domény, když měl za úkol postavit logo Microsoftu z dřevěných kostek. Nejen, že byl schopen vyvolat logo ze své interní znalostní báze, byl schopen logo „nakreslit“ (jako kód SVG) a poté použít výše naučené dovednosti k tomu, aby zjistil, které existující akce robota mohou sestavit jeho fyzickou podobu. “

Zatímco výsledky projektu vypadají slibně, Microsoft zdůraznil, že práce je „jen malým zlomkem“ věcí, které lze udělat, když se na robotech používají velké jazykové modely. Společnost navíc připomněla, že ChatGPT ještě není plně připravena pomáhat robotům při plnění úkolů, varuje nadšence a další výzkumníky, aby „vždy přijali nezbytná bezpečnostní opatření“.