Covariant sedang membuat ChatGPT untuk robot

Kovarian minggu ini mengumumkan peluncuran RFM-1 (Robotics Foundation Model 1). Peter Chen, salah satu pendiri dan CEO spinout kecerdasan buatan UC Berkeley mengatakan kepada TechCrunch bahwa platform tersebut, “pada dasarnya adalah model bahasa besar (LLM), tetapi untuk bahasa robot.”

RFM-1 adalah hasil, antara lain, sejumlah besar data yang dikumpulkan dari penerapan platform Brain AI Covariant. Dengan persetujuan pelanggan, startup ini telah membangun robot yang setara dengan database LLM.

“Visi RFM-1 adalah untuk memberdayakan miliaran robot di masa depan,” kata Chen. “Kami di Covariant telah berhasil mengerahkan banyak robot di gudang. Namun itu bukanlah batas kemana kita ingin mencapainya. Kami benar-benar ingin memberdayakan robot di bidang manufaktur, pemrosesan makanan, daur ulang, pertanian, industri jasa, dan bahkan di rumah-rumah penduduk.”

Platform ini diluncurkan ketika semakin banyak perusahaan robotika yang mendiskusikan masa depan sistem “tujuan umum”. Serangan tiba-tiba dari perusahaan robot humanoid seperti Agility, Figure, 1X dan Apptronik telah memainkan peran penting dalam percakapan tersebut. Faktor bentuknya sangat cocok untuk kemampuan beradaptasi (seperti halnya manusia yang menjadi modelnya), meskipun ketahanan sistem AI/perangkat lunak yang ada di dalamnya adalah pertanyaan yang sama sekali berbeda.

Untuk saat ini, perangkat lunak Covariant sebagian besar diterapkan pada lengan robot industri yang melakukan berbagai tugas gudang yang sudah dikenal, termasuk pekerjaan seperti pengambilan sampah. Saat ini tidak diterapkan pada humanoids, meskipun perusahaan menjanjikan beberapa tingkat agnostisisme perangkat keras.

“Kami menyukai banyak pekerjaan yang terjadi di bidang perangkat keras robot yang lebih umum,” kata Chen. “Menggabungkan titik perubahan kecerdasan dengan titik perubahan perangkat keras akan membuat kita melihat lebih banyak lagi ledakan aplikasi robot. Namun banyak di antaranya yang belum sepenuhnya tercapai, terutama di sisi perangkat keras. Sangat sulit untuk melampaui video panggung. Berapa banyak orang yang pernah berinteraksi dengan humanoid secara langsung? Itu menunjukkan tingkat kematangannya.”

Namun, Covariant tidak menghindar dari perbandingan manusia ketika menyangkut peran RFM-1 dalam proses pengambilan keputusan robot. Berdasarkan materi persnya, platform tersebut, “memberikan robot kemampuan berpikir yang mirip dengan manusia, mewakili pertama kalinya AI Generatif berhasil memberi robot komersial pemahaman yang lebih dalam tentang bahasa dan dunia fisik.”

Ini adalah salah satu bidang di mana kita harus berhati-hati dengan klaim, baik dalam hal perbandingan dengan konsep-konsep abstrak – atau bahkan filosofis – dan kemanjurannya di dunia nyata dari waktu ke waktu. “Kemampuan berpikir seperti manusia” adalah konsep luas yang memiliki arti berbeda bagi banyak orang. Di sini gagasan tersebut berlaku pada kemampuan sistem untuk memproses data dunia nyata dan menentukan tindakan terbaik untuk melaksanakan tugas yang ada.

Ini merupakan penyimpangan dari sistem robotik tradisional yang diprogram untuk melakukan satu pekerjaan berulang kali, tanpa batas waktu. Robot dengan tujuan tunggal tersebut telah berkembang pesat di lingkungan yang sangat terstruktur, dimulai dengan jalur perakitan otomotif. Selama ada sedikit perubahan pada tugas yang ada, lengan robot dapat melakukan tugasnya berulang kali, tanpa hambatan, hingga tiba waktunya untuk berhenti bekerja dan mengumpulkan arloji saku emas atas pengabdian setianya selama bertahun-tahun.

Namun, segala sesuatunya dapat rusak dengan cepat, bahkan dengan penyimpangan sekecil apa pun. Katakanlah objek tidak ditempatkan tepat di ban berjalan, atau ada penyesuaian pencahayaan yang berdampak pada kamera yang terpasang. Perbedaan semacam ini dapat berdampak besar pada kemampuan robot dalam mengeksekusi. Sekarang bayangkan mencoba membuat robot tersebut bekerja dengan komponen baru, material baru, atau bahkan melakukan tugas yang sama sekali berbeda. Itu lebih sulit lagi.

Ini adalah titik di mana pemrogram biasanya turun tangan. Robot harus diprogram ulang. Seringkali, seseorang dari luar pabrik ikut terlibat. Ini sangat menguras sumber daya dan waktu. Jika Anda ingin menghindari hal ini, salah satu dari dua hal perlu dilakukan. 1. Orang yang bekerja di lantai perlu mempelajari kode atau 2. Anda memerlukan metode baru yang lebih alami untuk berinteraksi dengan robot.

Meskipun melakukan hal pertama merupakan hal yang baik, tampaknya kecil kemungkinannya perusahaan akan bersedia menginvestasikan uangnya dan menunggu waktu yang diperlukan. Yang terakhir inilah yang coba dilakukan oleh Covariant dengan RFM-1. “ChatGPT untuk robot” bukanlah analogi yang sempurna, namun merupakan singkatan yang masuk akal (terutama mengingat koneksi pendirinya ke OpenAI).

Dari sudut pandang pelanggan, platform ini hadir sebagai kolom teks, mirip dengan iterasi AI generatif yang dihadapi konsumen saat ini. Masukkan perintah teks seperti, “ambil apel” dengan mengetik atau suara, dan sistem menggunakan data pelatihannya (bentuk, warna, ukuran, dll) untuk mengidentifikasi objek di depannya yang paling cocok dengan deskripsi tersebut.

RFM-1 kemudian menghasilkan hasil video – pada dasarnya simulasi – untuk menentukan tindakan terbaik menggunakan pelatihan sebelumnya. Bagian terakhir ini mirip dengan cara otak kita menghitung hasil potensial dari suatu tindakan sebelum dieksekusi.

Selama demo langsung, sistem bereaksi terhadap masukan seperti “ambil benda merah” dan bahkan yang lebih kompleks secara semantik, “ambil apa yang Anda pakai sebelum memakai sepatu”, yang menyebabkan robot mengambil dengan benar. apel dan sepasang kaus kaki, masing-masing.

Banyak ide-ide besar yang terlontar ketika membahas janji sistem. Setidaknya, Covariant memiliki silsilah yang mengesankan di antara para pendirinya. Chen mempelajari AI di Berkeley di bawah bimbingan Pieter Abbeel, salah satu pendiri Kovarian dan Kepala Ilmuwannya. Abbeel juga menjadi karyawan awal OpenAI pada tahun 2016, sebulan setelah Chen bergabung dengan perusahaan ChatGPT. Kovarian didirikan pada tahun berikutnya.

Chen mengatakan perusahaan mengharapkan platform RFM-1 baru akan bekerja dengan “mayoritas” perangkat keras yang sudah menggunakan perangkat lunak Covariant.