Microsoft mencoba ChatGPT pada robot dan hasilnya mengesankan

Peneliti di Microsoft baru-baru ini diuji ChatGPT pada lengan robot, drone, dan robot asisten rumah. Perusahaan berbagi bahwa kesimpulan umum dari percobaan memberikan hasil yang sangat baik, menandakan masa depan yang cerah untuk ChatGPT di dunia robotika.

Kehadiran ChatGPT menandai lahirnya era AI modern secara global. Setelah Microsoft mengumumkan pengintegrasian model bahasa AI ke dalam bing, perusahaan lain suka Google mulai membagikan karya mereka sendiri seputar teknologi. Segenggam perusahaan Cina juga dilaporkan sedang meneliti dan mengembangkan proyek mirip ChatGPT mereka sendiri. Dengan ini, Microsoft telah menyadari bahwa satu-satunya cara untuk tetap berada di puncak permainan ini adalah dengan terus maju dan menerapkan ChatGPT di bidang lain: robotika.

Dalam pekerjaan yang dibagikan oleh Microsoft Autonomous Systems and Robotics Research Group, ChatGPT diberi berbagai tugas menggunakan platform yang berbeda. Tes juga melibatkan prinsip desain yang berbeda, termasuk struktur pendorong khusus, API tingkat tinggi, dan umpan balik manusia melalui teks. Grup melaporkan bahwa sementara teknologi "masih membutuhkan bantuan", hasil proyek membuktikan bahwa "ChatGPT dapat melakukan banyak hal dengan sendirinya".

“Dengan mengikuti serangkaian prinsip desain kami, ChatGPT dapat menghasilkan kode untuk skenario robotika,” kelompok tersebut berbagi. “Tanpa penyesuaian apa pun, kami memanfaatkan pengetahuan LLM (model bahasa besar) untuk mengontrol faktor bentuk robot yang berbeda untuk berbagai tugas.”

Salah satu tes yang dilakukan dalam proyek tersebut melibatkan pemberian kontrol ChatGPT ke drone dan simulator Microsoft AirSim. Dalam beberapa video yang dibagikan, ChatGPT dapat menjalankan perintah mulai dari menemukan minuman, mengidentifikasi minuman berdasarkan deskripsi, dan menyarankan "opsi sehat". Itu juga berhasil mengikuti perintah teks untuk mengambil selfie di depan permukaan reflektif dan memeriksa rak dalam pola mesin pemotong rumput. Ketika digunakan dalam skenario inspeksi industri yang disimulasikan, para peneliti melaporkan hasil yang menguntungkan dalam uji penghindaran rintangan udara dan menambahkannya "mampu secara efektif mengurai niat tingkat tinggi dan isyarat geometris pengguna untuk mengontrol drone secara akurat."

Dalam skenario yang lebih luar biasa, ChatGPT lulus uji manipulasi dengan menumpuk blok dan menggunakannya untuk membuat logo empat warna Microsoft dengan bantuan basis pengetahuannya.

“Kami menggunakan umpan balik percakapan untuk mengajarkan model cara menyusun API yang awalnya disediakan menjadi fungsi tingkat tinggi yang lebih kompleks: yang dikodekan oleh ChatGPT dengan sendirinya,” jelas grup tersebut. “… Model tersebut menampilkan contoh menarik dalam menjembatani domain tekstual dan fisik saat ditugaskan membuat logo Microsoft dari balok kayu. Tidak hanya dapat mengingat logo dari basis pengetahuan internalnya, ia juga dapat 'menggambar' logo (sebagai kode SVG), dan kemudian menggunakan keterampilan yang dipelajari di atas untuk mencari tahu tindakan robot mana yang dapat menyusun bentuk fisiknya. ”

Sementara hasil proyek terlihat menjanjikan, Microsoft menekankan bahwa pekerjaan tersebut “hanya sebagian kecil” dari hal-hal yang dapat dilakukan ketika model bahasa besar digunakan pada robot. Selain itu, perusahaan mengingatkan bahwa ChatGPT belum sepenuhnya siap membantu robot dalam melakukan tugas, memperingatkan para penggemar dan peneliti lain untuk "selalu mengambil tindakan pencegahan yang diperlukan".