Meningkatkan Embodied AI: Bagaimana Meta Membawa Sentuhan dan Kelenturan Manusia ke AI

AI telah berkembang pesat dalam persepsi visual dan pemrosesan bahasa. Namun, kemampuan ini tidak cukup untuk membangun sistem yang dapat berinteraksi dengan dunia fisik. Manusia menangani objek atau membuat gerakan terkontrol menggunakan indera peraba. Kami merasakan tekstur, mengerti suhu, dan mengukur berat untuk memandu setiap aksi dengan akurasi. Umpan balik taktil ini memungkinkan kami untuk memanipulasi barang-barang rapuh, menggunakan alat dengan kontrol, dan melakukan tugas-tugas rumit dengan lancar.

Meta, yang terkenal dengan pekerjaannya dalam realitas virtual dan augmented, sekarang menghadapi tantangan untuk menciptakan AI yang dapat berinteraksi dengan dunia fisik seperti manusia. Melalui inisiatif FAIR Robotics, Meta mengembangkan alat dan kerangka kerja open-source untuk meningkatkan indera peraba dan kelenturan fisik robot. Upaya ini dapat mengarah pada pengembangan embodied AI — sistem yang tidak hanya melihat tetapi juga dapat merasakan dan memanipulasi objek seperti manusia.

Apa itu Embodied AI?

Embodied AI menggabungkan interaksi fisik dengan kecerdasan buatan, memungkinkan mesin untuk merasakan, merespons, dan berinteraksi secara alami dengan lingkungannya. Alih-alih hanya “melihat” atau “mendengar” input, itu memungkinkan sistem AI untuk merasakan dan bertindak di dunia. Bayangkan sebuah robot yang dapat merasakan tekanan yang diterapkan pada sebuah objek, menyesuaikan genggamannya, dan bergerak dengan kelenturan. Embodied AI memindahkan AI dari layar dan speaker ke dunia fisik, membuatnya mampu memanipulasi objek, melakukan tugas, dan berinteraksi lebih bermakna dengan orang.

Misalnya, sebuah robot yang dibangun pada Embodied AI dapat membantu seorang lanjut usia mengambil barang-barang rapuh tanpa merusaknya. Dalam perawatan kesehatan, itu dapat membantu dokter dengan memegang instrumen dengan presisi selama operasi. Potensi ini meluas jauh melampaui lengan robot di laboratorium atau lengan otomatis di pabrik; itu tentang menciptakan mesin yang memahami dan merespons lingkungan fisik mereka secara real-time.

Pendekatan Meta terhadap Embodied AI

Meta fokus pada tiga area kunci untuk membawa embodied AI lebih dekat ke sentuhan manusia. Pertama, perusahaan ini mengembangkan teknologi indera peraba canggih yang memungkinkan mesin untuk mendeteksi hal-hal seperti tekanan, tekstur, dan suhu. Kedua, Meta menciptakan model persepsi sentuhan yang memungkinkan AI untuk memahami dan merespons sinyal-sinyal ini. Terakhir, Meta membangun platform pengembangan taktil yang mengintegrasikan beberapa sensor dengan model persepsi ini, menawarkan sistem lengkap untuk membangun AI yang dapat disentuh. Berikut adalah bagaimana Meta mendorong kemajuan dalam embodied AI di setiap area ini.

Meta Digit 360: Indra Peraba Manusia

Meta telah memperkenalkan Digit 360 ujung jari, sebuah teknologi indera peraba yang dirancang untuk memberikan embodied AI indera peraba manusia. Dengan lebih dari 18 fitur indera, itu dapat mendeteksi getaran, panas, dan bahkan bahan kimia pada permukaan. Dilengkapi dengan chip AI, ujung jari memproses data sentuhan secara instan, memungkinkan respons cepat terhadap input seperti panas kompor atau tusukan jarum. Teknologi ini bertindak sebagai “sistem saraf perifer” dalam embodied AI, mensimulasikan respons refleksif yang mirip dengan reaksi manusia. Meta telah mengembangkan ujung jari ini dengan sistem optik unik yang berisi lebih dari 8 juta taxel yang dapat menangkap sentuhan dari setiap sudut. Ini mendeteksi detail kecil, hingga gaya sekecil satu millinewton, memberikan embodied AI kepekaan yang sangat halus terhadap lingkungannya.

Meta Sparsh: Dasar untuk Persepsi Sentuhan

Meta meningkatkan kemampuan persepsi sentuhan untuk membantu AI memahami dan merespons rangsangan fisik. Dinamai dari kata Sanskerta untuk “sentuhan”, Sparsh bertindak sebagai “otak sentuhan” untuk embodied AI. Model ini memungkinkan mesin untuk menafsirkan sinyal sentuhan kompleks seperti tekanan dan genggaman.

Salah satu fitur unggulan Sparsh adalah fleksibilitasnya. Sistem sentuhan tradisional menggunakan model terpisah untuk setiap tugas, sangat bergantung pada data yang dilabeli dan sensor tertentu. Sparsh mengubah pendekatan ini sepenuhnya. Sebagai model umum, itu beradaptasi dengan berbagai sensor dan tugas. Ini mempelajari pola sentuhan menggunakan pembelajaran mandiri (SSL) pada database besar lebih dari 460.000 gambar sentuhan—tanpa memerlukan data yang dilabeli.

Meta juga memperkenalkan TacBench, sebuah benchmark baru dengan enam tugas berbasis sentuhan untuk mengevaluasi kemampuan Sparsh. Meta mengklaim bahwa Sparsh mengungguli model tradisional sebesar 95,1%, terutama dalam skenario data rendah. Versi Sparsh yang dibangun pada arsitektur I-JEPA dan DINO Meta menunjukkan kemampuan luar biasa dalam tugas seperti estimasi gaya, deteksi slip, dan manipulasi kompleks.

Meta Digit Plexus: Platform untuk Pengembangan Sistem Taktil

Meta telah memperkenalkan Digit Plexus untuk mengintegrasikan teknologi indera peraba dan model persepsi sentuhan untuk menciptakan sistem embodied AI. Platform ini menggabungkan sensor ujung jari dan telapak tangan dalam satu tangan robot untuk memungkinkan respons sentuhan yang lebih terkoordinasi. Pengaturan ini memungkinkan embodied AI untuk memproses umpan balik sensorik dan menyesuaikan tindakannya secara real-time, seperti halnya tangan manusia bergerak dan bereaksi.

Dengan memstandarkan umpan balik sentuhan di seluruh tangan, Digit Plexus meningkatkan presisi dan kontrol embodied AI. Pengembangan ini sangat penting dalam bidang seperti manufaktur dan perawatan kesehatan, di mana penanganan yang hati-hati sangat penting. Platform ini menghubungkan sensor seperti ujung jari dan ReSkin ke sistem kontrol, menyederhanakan pengumpulan data, kontrol, dan analisis—semua melalui satu kabel.

Meta merilis desain perangkat lunak dan perangkat keras untuk Digit Plexus ke komunitas open-source. Tujuannya adalah untuk memfasilitasi kolaborasi dan mempercepat penelitian dalam embodied AI, mendorong inovasi dan kemajuan dalam bidang ini.

Meningkatkan Penelitian dan Pengembangan Embodied AI

Meta tidak hanya meningkatkan teknologi tetapi juga sumber daya untuk mempromosikan penelitian dan pengembangan embodied AI. Salah satu inisiatif kunci adalah pengembangan benchmark untuk menilai model AI. Salah satu benchmark, PARTNR (Planning And Reasoning Tasks in humaN-Robot collaboration), mengevaluasi bagaimana model AI berinteraksi dengan manusia selama tugas rumah tangga. Menggunakan simulator Habitat 3.0, PARTNR menyediakan lingkungan realistis di mana robot membantu dengan tugas seperti membersihkan dan memasak. Dengan lebih dari 100.000 tugas berbasis bahasa, itu bertujuan untuk mempercepat kemajuan dalam embodied AI.

Selain inisiatif internal, Meta berkolaborasi dengan organisasi seperti GelSight Inc. dan Wonik Robotics untuk mempercepat adopsi teknologi indera peraba. GelSight akan mendistribusikan sensor Digit 360, sedangkan Wonik Robotics akan memproduksi Allegro Hand, yang mengintegrasikan teknologi Digit Plexus. Dengan membuat teknologi ini tersedia melalui platform open-source dan kemitraan, Meta membantu menciptakan ekosistem yang dapat mengarah pada inovasi dalam perawatan kesehatan, manufaktur, dan bantuan rumah tangga.

Ringkasan

Meta meningkatkan embodied AI, membawanya melampaui penglihatan dan suara untuk mencakup indera peraba. Dengan inovasi seperti Digit 360 dan Sparsh, sistem AI memperoleh kemampuan untuk merasakan dan merespons lingkungannya dengan presisi. Dengan berbagi teknologi ini dengan komunitas open-source dan bermitra dengan organisasi kunci, Meta membantu mempercepat pengembangan indera peraba. Kemajuan ini dapat mengarah pada terobosan dalam bidang seperti perawatan kesehatan, manufaktur, dan bantuan rumah tangga, membuat AI lebih mampu dan responsif dalam tugas dunia nyata.