Расширение воплощённого ИИ: как Meta приносит человеческое осязание и ловкость в ИИ

ИИ продвинулся далеко в области зрительного восприятия и обработки языка. Однако этих способностей недостаточно для создания систем, которые могут взаимодействовать с физическим миром. Люди обрабатывают объекты или делают контролируемые движения, используя чувство осязания. Мы чувствуем текстуру, чувствуем температуру и оцениваем вес, чтобы руководить каждым действием с точностью. Эта тактильная обратная связь позволяет нам манипулировать хрупкими предметами, использовать инструменты с контролем и выполнять сложные задачи гладко.

Meta, известная своей работой в области виртуальной и дополненной реальности, теперь принимает вызов создания ИИ, который может взаимодействовать с физическим миром как человек. Через свою инициативу FAIR Robotics Meta разрабатывает открытые инструменты и框架 для улучшения тактильных чувств и физической ловкости роботов. Эти усилия могут привести к разработке воплощённого ИИ — систем, которые не только видят, но также могут чувствовать и манипулировать объектами, как люди.

Что такое воплощённый ИИ?

Воплощённый ИИ сочетает физическое взаимодействие с искусственным интеллектом, позволяя машинам чувствовать, реагировать и взаимодействовать естественно со своей средой. Вместо того, чтобы просто “видеть” или “слышать” входные данные, он позволяет системам ИИ чувствовать и действовать в мире. Представьте себе робота, который может чувствовать давление, которое он прикладывает к объекту, регулировать свою хватку и двигаться с ловкостью. Воплощённый ИИ перемещает ИИ из экранов и динамиков в физический мир, делая его способным манипулировать объектами, выполнять задачи и взаимодействовать более осмысленно с людьми.

Например, робот, построенный на основе воплощённого ИИ, может помочь пожилому человеку подобрать хрупкие предметы без повреждения. В здравоохранении он может помочь врачам, держа инструменты точно во время операции. Этот потенциал выходит далеко за пределы роботизированных рук в лабораториях или автоматизированных рук на заводах; это создание машин, которые понимают и реагируют на свою физическую среду в реальном времени.

Подход Meta к воплощённому ИИ

Meta фокусируется на трёх ключевых областях, чтобы приблизить воплощённый ИИ к человеческому осязанию. Во-первых, компания разрабатывает передовые тактильные датчики, которые позволяют машинам обнаруживать такие вещи, как давление, текстура и температура. Во-вторых, Meta создаёт модели тактильного восприятия, которые позволяют ИИ понимать и реагировать на эти сигналы. Наконец, Meta строит тактильную платформу разработки, которая интегрирует несколько датчиков с этими моделями восприятия, предлагая полную систему для создания тактильного ИИ. Вот как Meta продвигает прогресс в воплощённом ИИ в каждой из этих областей.

Meta Digit 360: человеческое тактильное чувство

Meta представила Digit 360, тактильную технологию, предназначенную для того, чтобы дать воплощённому ИИ человеческое тактильное чувство. С более чем 18 тактильными особенностями, он может обнаруживать вибрации, тепло и даже химические вещества на поверхностях. Оснащённый чипом ИИ, Digit 360 обрабатывает тактильные данные мгновенно, позволяя быстро реагировать на входные данные, такие как тепло плиты или острый укол иглы. Эта технология действует как “периферическая нервная система” в воплощённом ИИ, имитируя рефлекторные реакции, подобные человеческим.

Meta Sparsh: основа тактильного восприятия

Meta улучшает возможности тактильного восприятия, чтобы помочь ИИ понимать и реагировать на физические ощущения. Названный в честь санскритского слова “осязание”, Sparsh действует как “мозг осязания” для воплощённого ИИ. Модель позволяет машинам интерпретировать сложные тактильные сигналы, такие как давление и хватка.

Одной из выдающихся особенностей Sparsh является его универсальность. Традиционные тактильные системы используют отдельные модели для каждой задачи, сильно полагаясь на помеченные данные и конкретные датчики. Sparsh меняет этот подход полностью. Как модель общего назначения, он адаптируется к различным датчикам и задачам. Он учится тактильным закономерностям, используя самонаблюдаемое обучение на огромной базе данных более 460 000 тактильных изображений — без необходимости в помеченных данных.

Meta Digit Plexus: платформа для тактильной разработки

Meta представила Digit Plexus, чтобы интегрировать тактильные технологии и модели тактильного восприятия для создания системы воплощённого ИИ. Платформа объединяет датчики пальцев и ладони в одной роботизированной руке, чтобы ermögнить более координированные тактильные реакции. Это позволяет воплощённому ИИ обрабатывать сенсорную обратную связь и регулировать свои действия в реальном времени, как человеческая рука движется и реагирует.

Содействие исследованию и разработке воплощённого ИИ

Meta продвигает не только технологии, но и ресурсы для содействия исследованию и разработке воплощённого ИИ. Одним из ключевых инициатив является разработка эталонов для оценки моделей ИИ. Одним из таких эталонов является PARTNR (Planning And Reasoning Tasks in humaN-Robot collaboration), который оценивает, как модели ИИ взаимодействуют с людьми во время домашних задач. Используя симулятор Habitat 3.0, PARTNR предоставляет реалистичную среду, где роботы помогают с задачами, такими как уборка и приготовление пищи. С более чем 100 000 языковых задач он направлен на ускорение прогресса в воплощённом ИИ.

Итог

Meta продвигает воплощённый ИИ, выходя за пределы простого зрения и звука и включая в себя чувство осязания. С инновациями, такими как Digit 360 и Sparsh, системы ИИ получают способность чувствовать и реагировать на свою среду с точностью. Делясь этими технологиями с открытым сообществом и сотрудничая с ключевыми организациями, Meta помогает ускорить разработку тактильного восприятия. Этот прогресс может привести к прорывам в таких областях, как здравоохранение, производство и домашняя помощь, делая ИИ более способным и отзывчивым в реальных задачах.