Microsoft prøver ChatGPT på robotter, og resultaterne er imponerende

Forskere hos Microsoft for nylig afprøvet ChatGPT på robotarme, droner og hjemmeassistentrobotter. Virksomheden delte, at den generelle konklusion af eksperimentet leverede fremragende resultater, hvilket betyder en lys fremtid for ChatGPT i robotterriget.

Ankomsten af ​​ChatGPT signalerede fødslen af ​​den moderne AI-æra globalt. Efter at Microsoft annoncerede at integrere AI-sprogmodellen i Bing, kan andre virksomheder lide Google begyndte at dele deres egne værker, der kredsede om teknologien. En håndfuld Kinesiske virksomheder blev også rapporteret, at de forskede i og udviklede deres egne ChatGPT-lignende projekter. Med dette har Microsoft indset, at den eneste måde at blive på toppen af ​​dette spil er ved at gå fremad og anvende ChatGPT på andre områder: robotteknologi.

I arbejdet delt af Microsoft Autonomous Systems and Robotics Research Group, ChatGPT fik forskellige opgaver på forskellige platforme. Testene involverede også forskellige designprincipper, herunder specielle promptstrukturer, API'er på højt niveau og menneskelig feedback gennem tekster. Gruppen rapporterede, at mens teknologien "stadig har brug for noget hjælp", viste resultaterne af projektet, at "ChatGPT kan gøre meget af sig selv."

"Ved at følge vores sæt af designprincipper kan ChatGPT generere kode til robotscenarier," delte gruppen. "Uden nogen finjustering udnytter vi LLM's (store sprogmodel) viden til at kontrollere forskellige roboters formfaktorer til en række forskellige opgaver."

En af testene udført i projektet involverede at give ChatGPT kontrol til en drone og Microsoft AirSim-simulator. I nogle af de delte videoer var ChatGPT i stand til at udføre kommandoer fra at finde en drink, identificere en drink baseret på beskrivelser og foreslå en "sund mulighed." Det lykkedes også med succes at følge tekstkommandoen om at tage en selfie foran en reflekterende overflade og inspicere en hylde i et plæneklippermønster. Når det blev brugt i et simuleret industriel inspektionsscenario, rapporterede forskere gunstige resultater i luftforhindringstesten og tilføjede, at den "var i stand til effektivt at analysere brugerens hensigter på højt niveau og geometriske signaler for at kontrollere dronen nøjagtigt."

I et mere utroligt scenarie bestod ChatGPT manipulationstesten ved at stable blokke og bruge dem til at skabe Microsofts firfarvede logo ved hjælp af sin videnbase.

"Vi brugte samtale-feedback til at lære modellen, hvordan man komponerer de oprindeligt leverede API'er til mere komplekse funktioner på højt niveau: at ChatGPT kodede af sig selv," forklarede gruppen. “...Modellen viste et fascinerende eksempel på at bygge bro mellem de tekstuelle og fysiske domæner, da den fik til opgave at bygge Microsoft-logoet ud af træklodser. Ikke alene var det i stand til at genkalde logoet fra sin interne vidensbase, det var i stand til at 'tegne' logoet (som SVG-kode) og derefter bruge de færdigheder, der blev lært ovenfor, til at finde ud af, hvilke eksisterende robothandlinger der kan sammensætte dets fysiske form. ”

Mens resultaterne af projektet ser lovende ud, understregede Microsoft, at arbejdet "kun er en lille brøkdel" af de ting, der kan gøres, når store sprogmodeller bruges på robotter. Derudover mindede virksomheden om, at ChatGPT endnu ikke er helt klar til at hjælpe robotter med at udføre opgaver, advare entusiaster og andre forskere om at "altid tage de nødvendige sikkerhedsforanstaltninger."