Avançando a IA Encarnada: Como a Meta está trazendo Toque e Destreza Humanos para a IA

A IA avançou muito na percepção visual e no processamento de linguagem. No entanto, essas habilidades não são suficientes para construir sistemas que possam interagir com o mundo físico. Os humanos manipulam objetos ou fazem movimentos controlados usando o sentido do toque. Sentimos textura, percebemos temperatura e avaliamos peso para guiar cada ação com precisão. Esse feedback táctil nos permite manipular itens frágeis, usar ferramentas com controle e realizar tarefas intricadas suavemente.

A Meta, conhecida por seu trabalho em realidade virtual e aumentada, agora está enfrentando o desafio de criar IA que possa interagir com o mundo físico de forma semelhante à humana. Por meio de sua iniciativa FAIR Robotics, a Meta está desenvolvendo ferramentas e frameworks de código aberto para melhorar a sensação de toque e agilidade física dos robôs. Esses esforços podem levar ao desenvolvimento de IA encarnada — sistemas que não apenas veem, mas também podem sentir e manipular objetos como os humanos fazem.

O que é IA Encarnada?

IA Encarnada combina interação física com inteligência artificial, permitindo que as máquinas sintam, respondam e interajam naturalmente com seu ambiente. Em vez de apenas “ver” ou “ouvir” entradas, ela permite que os sistemas de IA “sintam” e “ajam” no mundo. Pense em um robô que pode sentir a pressão que aplica a um objeto, ajustar sua pegada e se mover com agilidade. A IA Encarnada move a IA das telas e alto-falantes para o mundo físico, tornando-a capaz de manipular objetos, realizar tarefas e interagir de forma mais significativa com as pessoas.

Por exemplo, um robô construído com base na IA Encarnada pode ajudar uma pessoa idosa a pegar itens frágeis sem danificá-los. Na área de saúde, pode ajudar os médicos a segurar instrumentos com precisão durante a cirurgia. Esse potencial vai muito além de braços robóticos em laboratórios ou braços automatizados em fábricas; é sobre criar máquinas que entendam e respondam ao seu ambiente físico em tempo real.

A Abordagem da Meta para a IA Encarnada

A Meta está se concentrando em três áreas-chave para trazer a IA Encarnada para um toque e destreza humanos. Primeiro, a empresa está desenvolvendo tecnologias de sensação táctil avançadas que permitem que as máquinas detectem coisas como pressão, textura e temperatura. Em segundo lugar, a Meta está criando modelos de percepção de toque que permitem que a IA entenda e reaja a esses sinais. Por fim, a Meta está construindo uma plataforma de desenvolvimento táctil que integra vários sensores com esses modelos de percepção, oferecendo um sistema completo para a construção de IA habilitada para toque. Aqui está como a Meta está impulsionando o progresso na IA Encarnada em cada uma dessas áreas.

Meta Digit 360: Sensação Táctil de Nível Humano

A Meta introduziu Digit 360, uma tecnologia de sensação táctil projetada para dar à IA Encarnada um sentido de toque semelhante ao humano. Com mais de 18 recursos de sensação, pode detectar vibrações, calor e até mesmo substâncias químicas em superfícies. Equipado com um chip de IA, o dedo processa dados de toque instantaneamente, permitindo respostas rápidas a entradas como o calor de uma estufa ou a picada afiada de uma agulha. Essa tecnologia atua como um “sistema nervoso periférico” dentro da IA Encarnada, simulando respostas reflexivas semelhantes às reações humanas. A Meta desenvolveu esse dedo com um sistema óptico único que contém mais de 8 milhões de taxels que podem capturar o toque de todos os ângulos. Ele sente detalhes minúsculos, até forças tão pequenas quanto um milinewton, dando à IA Encarnada uma sensibilidade finamente ajustada ao seu ambiente.

Meta Sparsh: A Fundação para a Percepção Tátil

A Meta está aprimorando as capacidades de percepção de toque para ajudar a IA a entender e responder a sensações físicas. Nomeado após a palavra em sânscrito para “toque”, Sparsh atua como um “cérebro de toque” para a IA Encarnada. O modelo permite que as máquinas interpretem sinais tácteis complexos como pressão e pegada.

Uma das características destacadas do Sparsh é sua versatilidade. Sistemas tácteis tradicionais empregam modelos separados para cada tarefa, dependendo fortemente de dados rotulados e sensores específicos. O Sparsh muda completamente essa abordagem. Como um modelo de propósito geral, ele se adapta a vários sensores e tarefas. Ele aprende padrões de toque usando aprendizado auto-supervisionado (SSL) em um banco de dados maciço de mais de 460.000 imagens tácteis — sem precisar de dados rotulados.

A Meta também introduziu o TacBench, um novo benchmark com seis tarefas baseadas em toque para avaliar as habilidades do Sparsh. A Meta afirma que o Sparsh superou os modelos tradicionais em 95,1%, especialmente em cenários de baixo dados. Versões do Sparsh construídas nas arquiteturas I-JEPA e DINO da Meta demonstraram habilidades notáveis em tarefas como estimativa de força, detecção de escorregamento e manipulação complexa.

Meta Digit Plexus: Uma Plataforma para o Desenvolvimento de Sistemas Táteis

A Meta introduziu o Digit Plexus para integrar tecnologias de sensação e modelos de percepção tátil para criar um sistema de IA Encarnada. A plataforma combina sensores de dedo e palma dentro de uma mão robótica única para permitir respostas de toque mais coordenadas. Essa configuração permite que a IA Encarnada processe feedback sensorial e ajuste suas ações em tempo real, como uma mão humana se move e reage.

Ao padronizar o feedback de toque em toda a mão, o Digit Plexus melhora a precisão e o controle da IA Encarnada. Esse desenvolvimento é especialmente vital em campos como manufatura e saúde, onde o manuseio cuidadoso é essencial. A plataforma liga sensores como o dedo e o ReSkin a um sistema de controle, simplificando a coleta de dados, controle e análise — tudo através de um único cabo.

A Meta está liberando os designs de software e hardware do Digit Plexus para a comunidade de código aberto. O objetivo é fomentar a colaboração e acelerar a pesquisa em IA Encarnada, impulsionando a inovação e o progresso nesses campos.

Promovendo a Pesquisa e o Desenvolvimento de IA Encarnada

A Meta está avançando não apenas na tecnologia, mas também nos recursos para promover a pesquisa e o desenvolvimento de IA Encarnada. Uma iniciativa-chave é o desenvolvimento de benchmarks para avaliar modelos de IA. Um desses benchmarks, PARTNR (Planejamento e Raciocínio em Tarefas de Colaboração Humano-Robô), avalia como os modelos de IA interagem com humanos durante tarefas domésticas. Usando o simulador Habitat 3.0, o PARTNR fornece um ambiente realista onde os robôs assistem com tarefas como limpeza e cozimento. Com mais de 100.000 tarefas baseadas em linguagem, ele visa acelerar o progresso na IA Encarnada.

Além das iniciativas internas, a Meta está colaborando com organizações como GelSight Inc. e Wonik Robotics para acelerar a adoção de tecnologias de sensação tátil. A GelSight distribuirá sensores Digit 360, enquanto a Wonik Robotics fabricará a mão Allegro, que integra a tecnologia do Digit Plexus. Ao tornar essas tecnologias disponíveis por meio de plataformas de código aberto e parcerias, a Meta está ajudando a criar um ecossistema que pode levar a inovações em saúde, manufatura e assistência doméstica.

A Linha de Fundo

A Meta está avançando na IA Encarnada, levando-a além da visão e do som para incluir o sentido do toque. Com inovações como o Digit 360 e o Sparsh, os sistemas de IA estão ganhando a capacidade de sentir e responder ao seu ambiente com precisão. Ao compartilhar essas tecnologias com a comunidade de código aberto e parceriar com organizações-chave, a Meta está ajudando a acelerar o desenvolvimento da sensação tátil. Esse progresso pode levar a avanços em campos como saúde, manufatura e assistência doméstica, tornando a IA mais capaz e responsiva em tarefas do mundo real, trazendo essas tecnologias com a comunidade de código aberto e parceirando com organizações-chave, a Meta está ajudando a acelerar o desenvolvimento da sensação tátil. Esse progresso pode levar a avanços em campos como saúde, manufatura e assistência doméstica, tornando a IA mais capaz e responsiva em tarefas do mundo real.