Robotyka i fizyczna AI
Rozwój AI z wcielonym człowieczeństwem: Jak Meta wprowadza ludzki dotyk i zręczność do AI
AI przeszła długą drogę w percepcji wzrokowej i przetwarzaniu języka. Jednakże te zdolności nie są wystarczające do budowy systemów, które mogą współdziałać z światem fizycznym. Ludzie obsługują obiekty lub wykonują kontrolowane ruchy za pomocą zmysłu dotyku. Czujemy teksturę, odczuwamy temperaturę i mierzymy wagę, aby prowadzić każdą akcję z dokładnością. Ten zwrotne sprzężenie pozwala nam manipulować delikatnymi przedmiotami, używać narzędzi z kontrolą i wykonywać złożone zadania gładko.
Meta, znana ze swojej pracy w rzeczywistości wirtualnej i rozszerzonej, teraz podejmuje wyzwanie tworzenia AI, które może współdziałać ze światem fizycznym podobnie jak człowiek. Za pomocą swojej inicjatywy FAIR Robotics, Meta rozwija otwarte narzędzia i ramy, aby poprawić zmysł dotyku i fizyczną zwinność robotów. Te wysiłki mogą doprowadzić do rozwoju AI z wcielonym człowieczeństwem — systemów, które nie tylko widzą, ale także czują i manipulują obiektami tak jak ludzie.
Czym jest AI z wcielonym człowieczeństwem?
AI z wcielonym człowieczeństwem łączy interakcję fizyczną z sztuczną inteligencją, umożliwiając maszynom czuć, reagować i angażować się naturalnie ze swoim otoczeniem. Zamiast po prostu “widzieć” lub “słyszeć” dane wejściowe, pozwala systemom AI “czuć” i “działać” w świecie. Wyobraź sobie robota, który może czuć ciśnienie, które stosuje do obiektu, dostosować swoje uchwyt i poruszać się z zwinnością. AI z wcielonym człowieczeństwem przenosi AI z ekranów i głośników do świata fizycznego, czyniąc ją zdolną do manipulowania obiektami, wykonywania zadań i współdziałania bardziej znacząco z ludźmi.
Na przykład, robot zbudowany na AI z wcielonym człowieczeństwem mógłby pomóc osobie starszej w podnoszeniu delikatnych przedmiotów bez uszkadzania ich. W opiece zdrowotnej mógłby pomóc lekarzom, trzymając instrumenty precyzyjnie podczas operacji. Ten potencjał sięga daleko poza ramiona robota w laboratoriach lub zautomatyzowane ramiona w fabrykach; chodzi o tworzenie maszyn, które rozumieją i reagują na swoje środowisko fizyczne w czasie rzeczywistym.
Podejście Meta do AI z wcielonym człowieczeństwem
Meta koncentruje się na trzech kluczowych obszarach, aby przybliżyć AI z wcielonym człowieczeństwem do ludzkiego dotyku. Po pierwsze, firma rozwija zaawansowane technologie czucia dotykowego, które umożliwiają maszynom wykrywanie rzeczy takich jak ciśnienie, tekstura i temperatura. Po drugie, Meta tworzy modele percepcji dotykowej, które pozwalają AI zrozumieć i zareagować na te sygnały. Wreszcie, Meta buduje platformę rozwoju dotykowego, która łączy wiele czujników z tymi modelami percepcji, oferując kompletny system do tworzenia AI z włączonym dotykiem. Oto, jak Meta napędza postęp w AI z wcielonym człowieczeństwem w każdym z tych obszarów.
Meta Digit 360: Ludzkie poziomy czucia dotykowego
Meta wprowadziła Digit 360, technologię czucia dotykowego zaprojektowaną, aby dać AI z wcielonym człowieczeństwem ludzki zmysł dotyku. Z ponad 18 funkcjami czucia, może wykrywać wibracje, ciepło i nawet chemikalia na powierzchniach. Wyposażony w chip AI, Digit 360 przetwarza dane dotykowe natychmiast, umożliwiając szybkie reakcje na dane wejściowe, takie jak ciepło kuchenki lub ostry pchnięcie igły. Ta technologia działa jako “obwód nerwowy” w AI z wcielonym człowieczeństwem, symulując odruchowe reakcje podobne do ludzkich. Meta opracowała ten czujnik z unikalnym systemem optycznym zawierającym ponad 8 milionów taxeli, które mogą przechwytywać dotyk z każdego kąta. Wykrywa drobne szczegóły, aż do sił tak małych jak jeden millinewton, dając AI z wcielonym człowieczeństwem delikatnie dostrojone wrażliwość na swoje otoczenie.
Meta Sparsh: Podstawa percepcji dotykowej
Meta ulepsza percepcję dotykową, aby pomóc AI zrozumieć i zareagować na fizyczne wrażenia. Nazwany od sanskryckiego słowa “dotyk”, Sparsh działa jako “mózg dotyku” dla AI z wcielonym człowieczeństwem. Model pozwala maszynom interpretować złożone sygnały dotykowe, takie jak ciśnienie i chwyt.
Jedną z wyróżniających się cech Sparsha jest jego wszechstronność. Tradycyjne systemy dotykowe wykorzystują oddzielne modele dla każdego zadania, opierając się silnie na danych oznaczonych i konkretnych czujnikach. Sparsh zmienia całkowicie ten podejście. Jako model ogólnego przeznaczenia, adaptuje się do różnych czujników i zadań. Uczy się wzorców dotykowych za pomocą nienadzorowanego uczenia (SSL) na ogromnej bazie ponad 460 000 obrazów dotykowych — bez potrzeby danych oznaczonych.
Meta również wprowadziła TacBench, nowy benchmark z sześcioma zadaniami dotykowymi, aby ocenić możliwości Sparsha. Meta twierdzi, że Sparsh przewyższył tradycyjne modele o 95,1%, szczególnie w scenariuszach z niskimi danymi. Wersje Sparsha zbudowane na architekturach Meta I-JEPA i DINO wykazały zdumiewające umiejętności w zadaniach, takich jak szacowanie siły, wykrywanie poślizgu i złożona manipulacja.
Meta Digit Plexus: Platforma rozwoju systemów dotykowych
Meta wprowadziła Digit Plexus, aby zintegrować technologie czucia i modele percepcji dotykowej do tworzenia systemu AI z wcielonym człowieczeństwem. Platforma łączy czujniki palców i dłoni w ramieniu robota, umożliwiając bardziej skoordynowane reakcje dotykowe. To ustawienie pozwala AI z wcielonym człowieczeństwem przetwarzać zwrotne sprzężenie i dostosowywać swoje działania w czasie rzeczywistym, podobnie jak ludzka ręka porusza się i reaguje.
Poprzez standaryzowanie sprzężenia dotykowego w całej dłoni, Digit Plexus zwiększa precyzję i kontrolę AI z wcielonym człowieczeństwem. Ten rozwój jest szczególnie istotny w dziedzinach, takich jak produkcja i opieka zdrowotna, gdzie staranne obchodzenie się jest niezbędne. Platforma łączy czujniki, takie jak palce i ReSkin, z systemem sterowania, upraszczając zbieranie danych, sterowanie i analizę — wszystko przez jeden kabel.
Meta udostępnia oprogramowanie i projekty sprzętowe dla Digit Plexus społeczności open-source. Celem jest wspieranie współpracy i przyspieszanie badań nad AI z wcielonym człowieczeństwem, napędzając innowacje i postęp w tych dziedzinach.
Promowanie badań i rozwoju AI z wcielonym człowieczeństwem
Meta rozwija nie tylko technologię, ale także zasoby, aby promować badania i rozwój AI z wcielonym człowieczeństwem. Jednym z kluczowych przedsięwzięć jest rozwój benchmarków do oceny modeli AI. Jednym z takich benchmarków, PARTNR (Planowanie i rozumowanie w zadaniach współpracy człowiek-robot), ocenia, jak modele AI współdziałają z ludźmi podczas zadań domowych. Korzystając z symulacji Habitat 3.0, PARTNR zapewnia realistyczne środowisko, w którym roboty pomagają w zadaniach, takich jak sprzątanie i gotowanie. Z ponad 100 000 zadań opartych na języku, ma na celu przyspieszyć postęp w AI z wcielonym człowieczeństwem.
Ponadto, Meta współpracuje z organizacjami, takimi jak GelSight Inc. i Wonik Robotics, aby przyspieszyć przyjęcie technologii czucia dotykowego. GelSight będzie dystrybuował czujniki Digit 360, podczas gdy Wonik Robotics będzie produkował rękę Allegro, która integruje technologię Digit Plexus. Udostępniając te technologie za pomocą platform open-source i partnerstw, Meta pomaga tworzyć ekosystem, który może prowadzić do innowacji w opiece zdrowotnej, produkcji i pomocy domowej.
Podsumowanie
Meta rozwija AI z wcielonym człowieczeństwem, przenosząc ją poza zwykłe widzenie i słyszenie, aby objąć zmysł dotyku. Z innowacjami, takimi jak Digit 360 i Sparsh, systemy AI zyskują zdolność czucia i reagowania na swoje otoczenie z precyzją. Udostępniając te technologie społeczności open-source i współpracując z kluczowymi organizacjami, Meta pomaga przyspieszyć rozwój czucia dotykowego. Ten postęp może prowadzić do przełomów w dziedzinach, takich jak opieka zdrowotna, produkcja i pomoc domowa, czyniąc AI bardziej zdolną i responsywną w zadaniach świata rzeczywistego.












