Microsoft probeert ChatGPT op robots en de resultaten zijn indrukwekkend

Onderzoekers bij Microsoft onlangs getest ChatGPT op robotarmen, drones en robots voor thuisassistenten. Het bedrijf deelde dat de algemene conclusie van het experiment uitstekende resultaten opleverde, wat een mooie toekomst betekent voor ChatGPT op het gebied van robotica.

De komst van ChatGPT betekende wereldwijd de geboorte van het moderne AI-tijdperk. Nadat Microsoft had aangekondigd het AI-taalmodel te integreren in Bing, andere bedrijven willen Kopen Google Reviews begonnen hun eigen werken rond de technologie te delen. Een handvol Chinese bedrijven er werd ook gemeld dat ze hun eigen ChatGPT-achtige projecten onderzochten en ontwikkelden. Hiermee heeft Microsoft zich gerealiseerd dat de enige manier om aan de top van dit spel te blijven, is door door te gaan en ChatGPT toe te passen op andere gebieden: robotica.

In het werk gedeeld door Microsoft Autonomous Systems en Robotics Research Group, ChatGPT kreeg verschillende taken met behulp van verschillende platforms. De tests omvatten ook verschillende ontwerpprincipes, waaronder speciale promptstructuren, hoogwaardige API's en menselijke feedback via teksten. De groep meldde dat hoewel de technologie "nog steeds wat hulp nodig heeft", de resultaten van het project bewezen dat "ChatGPT veel zelf kan doen".

"Door onze reeks ontwerpprincipes te volgen, kan ChatGPT code genereren voor robotica-scenario's", deelde de groep. "Zonder enige fijnafstemming maken we gebruik van de LLM's (grote taalmodel) kennis om verschillende robotvormfactoren te besturen voor een verscheidenheid aan taken."

Een van de tests die in het project werd uitgevoerd, betrof het geven van ChatGPT-besturing aan een drone en een Microsoft AirSim-simulator. In sommige van de gedeelde video's was ChatGPT in staat om opdrachten uit te voeren van het vinden van een drankje, het identificeren van een drankje op basis van beschrijvingen en het suggereren van een 'gezonde optie'. Het slaagde er ook in om met succes het tekstcommando te volgen om een ​​selfie te maken voor een reflecterend oppervlak en een plank in een grasmaaierpatroon te inspecteren. Bij gebruik in een gesimuleerd industrieel inspectiescenario rapporteerden onderzoekers gunstige resultaten in de test om obstakels vanuit de lucht te vermijden en voegden ze eraan toe: "was in staat om de intentie op hoog niveau en geometrische aanwijzingen van de gebruiker effectief te ontleden om de drone nauwkeurig te besturen."

In een meer ongelooflijk scenario slaagde ChatGPT voor de manipulatietest door blokken te stapelen en ze te gebruiken om het vierkleurige logo van Microsoft te maken met behulp van de kennisbank.

"We gebruikten gespreksfeedback om het model te leren hoe de oorspronkelijk geleverde API's moesten worden samengesteld tot complexere functies op hoog niveau: die ChatGPT zelf codeerde", legt de groep uit. “...Het model toonde een fascinerend voorbeeld van het overbruggen van de tekstuele en fysieke domeinen toen het de taak kreeg om het Microsoft-logo uit houten blokken te bouwen. Het was niet alleen in staat om het logo uit zijn interne kennisbank te halen, het was ook in staat om het logo te 'tekenen' (als SVG-code) en vervolgens de hierboven geleerde vaardigheden te gebruiken om erachter te komen welke bestaande robotacties zijn fysieke vorm kunnen vormen. ”

Hoewel de resultaten van het project er veelbelovend uitzien, benadrukte Microsoft dat het werk "slechts een klein deel" is van de dingen die gedaan kunnen worden wanneer grote taalmodellen op robots worden gebruikt. Bovendien herinnerde het bedrijf eraan dat ChatGPT nog niet helemaal klaar is om robots te helpen bij het uitvoeren van taken, waarschuwde het enthousiastelingen en andere onderzoekers om "altijd de nodige veiligheidsmaatregelen te nemen".