Microsoft prova ChatGPT sui robot e i risultati sono impressionanti

I ricercatori di Microsoft di recente testato ChatGPT su braccia robotiche, droni e robot assistenti domestici. La società ha condiviso che la conclusione generale dell'esperimento ha prodotto risultati eccellenti, a significare un brillante futuro per ChatGPT nel regno della robotica.

L'arrivo di ChatGPT ha segnato la nascita della moderna era dell'IA a livello globale. Dopo che Microsoft ha annunciato l'integrazione del modello di linguaggio AI in Bing, piace ad altre società Google ha iniziato a condividere i propri lavori che ruotano attorno alla tecnologia. Una manciata di Ditte cinesi sono stati anche segnalati ricercando e sviluppando i propri progetti simili a ChatGPT. Con questo, Microsoft ha capito che l'unico modo per rimanere al passo con questo gioco è andare avanti e applicare ChatGPT in altre aree: la robotica.

Nel lavoro condiviso da Microsoft Autonomous Systems and Robotics Research Group, ChatGPT è stato assegnato a vari compiti utilizzando diverse piattaforme. I test hanno coinvolto anche diversi principi di progettazione, tra cui speciali strutture di prompt, API di alto livello e feedback umano tramite testi. Il gruppo ha riferito che mentre la tecnologia "ha ancora bisogno di aiuto", i risultati del progetto hanno dimostrato che "ChatGPT può fare molto da solo".

"Seguendo la nostra serie di principi di progettazione, ChatGPT può generare codice per scenari di robotica", ha condiviso il gruppo. "Senza alcuna messa a punto, sfruttiamo la conoscenza del LLM (modello di linguaggio di grandi dimensioni) per controllare diversi fattori di forma dei robot per una varietà di attività".

Uno dei test eseguiti nel progetto prevedeva di dare il controllo ChatGPT a un drone e al simulatore Microsoft AirSim. In alcuni dei video condivisi, ChatGPT è stato in grado di eseguire comandi per trovare un drink, identificare un drink in base alle descrizioni e suggerire una "sana opzione". È anche riuscito a seguire con successo il comando di testo per scattare un selfie davanti a una superficie riflettente e ispezionare uno scaffale in uno schema di tosaerba. Quando utilizzato in uno scenario di ispezione industriale simulato, i ricercatori hanno riportato risultati favorevoli nel test di evitamento degli ostacoli aerei e hanno aggiunto che "è stato in grado di analizzare efficacemente l'intento di alto livello dell'utente e i segnali geometrici per controllare il drone in modo accurato".

In uno scenario più incredibile, ChatGPT ha superato il test di manipolazione impilando blocchi e utilizzandoli per creare il logo a quattro colori di Microsoft con l'aiuto della sua knowledge base.

"Abbiamo utilizzato il feedback conversazionale per insegnare al modello come comporre le API originariamente fornite in funzioni di alto livello più complesse: quella ChatGPT codificata da sola", ha spiegato il gruppo. “…Il modello ha mostrato un affascinante esempio di collegamento tra i domini testuali e fisici quando è stato incaricato di costruire il logo Microsoft con blocchi di legno. Non solo è stato in grado di richiamare il logo dalla sua base di conoscenza interna, ma è stato in grado di "disegnare" il logo (come codice SVG) e quindi utilizzare le competenze apprese in precedenza per capire quali azioni del robot esistenti possono comporre la sua forma fisica. "

Sebbene i risultati del progetto sembrino promettenti, Microsoft ha sottolineato che il lavoro è "solo una piccola parte" delle cose che possono essere fatte quando i modelli di linguaggio di grandi dimensioni vengono utilizzati sui robot. Inoltre, la società ha ricordato che ChatGPT non è ancora del tutto pronto per aiutare i robot nell'esecuzione di compiti, avvertendo gli appassionati e altri ricercatori di "prendere sempre le necessarie precauzioni di sicurezza".