Isaac ROS 5.0 від NVIDIA додає агентні навички та підтримку ROS Lyrical

NVIDIA випустила Isaac ROS 5.0, збірку GPU‑прискорених пакетів, побудованих на відкритій платформі ROS, 22 вересня 2026 року на конференції ROSCon у Торонто, додаючи агентні робочі процеси розробки, підтримку платформи ROS Lyrical та Ubuntu 24.04, а також нові можливості сприймання.

ROS — це проєкт компанії Open Robotics, який забезпечує відкриту основу для більшості сучасної розробки робототехніки, надаючи розробникам спільні інструменти, бібліотеки та стандарти для створення та з’єднання роботних застосунків. NVIDIA заявила, що Isaac ROS приносить її прискорені обчислення, фізичні AI‑моделі та готові до виробництва бібліотеки майже 1,3 мільйона користувачам ROS.

Isaac ROS 5.0 вводить підтримку ROS Lyrical та Ubuntu 24.04, надаючи розробникам шлях до впровадження останньої платформи ROS, одночасно продовжуючи прискорювати вимогливі робототехнічні навантаження за допомогою обчислень NVIDIA. Публікація доступна вже зараз, безкоштовна та з відкритим кодом, з документацією та матеріалами для швидкого старту на GitHub.

Агентні навички та моделі сприймання

У випуску представлено нові навички NVIDIA Isaac для налаштування та маніпуляції, які NVIDIA описала як багаторазові робочі процеси, які розробники та AI‑агенти можуть використовувати для виконання завдань розробки робототехніки. NVIDIA зазначила, що документація, готова для агентів, також спрощує AI‑агентам розуміння інструментів та робочих процесів Isaac ROS, швидше перетворюючи наміри розробників у працюючі застосунки.

Серед нових навичок NVIDIA зазначила, що навичка тонкого налаштування FoundationStereo дозволяє AI‑агенту допомагати адаптувати стерео‑модель сприймання до камер, середовища та робототехнічного застосунку розробника, щоб розробники могли досягти більш точної сприйнятливості для конкретної конфігурації сенсорів. FoundationPose, базова модель NVIDIA для оцінки та відстеження поз об’єктів, тепер надає бібліотеку інференсу, готову для агентів, яка, за словами NVIDIA, дозволяє роботам сприймати та відстежувати позицію та орієнтацію об’єктів у 5,5 рази швидше.

Pick and place, поширений робочий процес, який поєднує виявлення, оцінку глибини та вивід поз, тепер доступний як окрема навичка, готова для агентів, яку розробники роботів можуть використовувати поза межами Isaac ROS.

Незалежний від постачальника транспорт пам’яті в ROS Lyrical

NVIDIA співпрацювала з Open Source Robotics Alliance, щоб внести стандартний інтерфейс обробки даних у ROS Lyrical, який, за словами NVIDIA, допомагає робототехнічному програмному забезпеченню ефективно працювати на різному обчислювальному обладнанні, включаючи GPU. Доступний всій спільноті ROS, інтерфейс надає розробникам послідовний спосіб прискорювати вимогливі робототехнічні застосунки, причому CUDA слугує працюючим прикладом GPU‑прискорення.

Альянс описує внесену функцію rosidl::buffer як одну з ключових особливостей ROS Lyrical Luth, останнього випуску ROS з довгостроковою підтримкою, який з’явився 23 травня 2026 року. Ініційована та внесена NVIDIA, ця функція забезпечує прискорений перенос між пам’яттю CPU, пам’яттю GPU або будь‑яким іншим доменом пам’яті, що надає постачальник, використовуючи спільну композицію для представлення та транспортування зовнішньо керованої пам’яті, що усуває необхідність створювати новий тип повідомлення для кожного прискорювача чи бібліотеки.

За словами альянсу, дизайн зберігає стандартні повідомлення ROS, видавці, підписники, межі вузлів та проміжне програмне забезпечення ROS, а реалізації проміжного ПЗ можуть завантажувати бекенди буфера як плагіни. Постачальники можуть створювати бібліотеки буфера, що надають розробникам безпечний, орієнтований на користувача доступ до типу апаратної пам’яті, а пакети конвертації можуть адаптувати повідомлення ROS до таких фреймворків, як PyTorch або CV‑CUDA. Альянс зазначає, що транспорт без копіювання доступний як шлях, залежний від бекенду, а не як універсальна гарантія, залежно від змінних, таких як сумісність між вузлами, локальність, транспорт та можливості пам’яті.

У дописі від 20 вересня 2026 року на веб‑сайті Open Source Robotics Alliance, керівник проєкту ROS Майкл Дж. Керрол сказав: “NVIDIA дійсно є зразком у тому, як вони підходили до впровадження роботи з буфером. Вони не просто переклали це на нас, а ініціювали багато співпраці та внесків спільноти”.

Інтеграції екосистеми та розгортання на роботі

У випуску NVIDIA описано екосистему робототехніки, яка вже розширює цей агентний підхід. AgenticROS, проєкт з відкритим кодом, спонсорований компанією RealSense, що займається 3D‑перцепційними технологіями, з’єднує Isaac ROS з відкритими моделями NVIDIA Nemotron та кресленнями NemoClaw, дозволяючи AI‑агентам взаємодіяти з роботами на базі ROS. RealSense також оптимізує свої AI‑рідні 3D стерео‑камери глибини, включаючи RealSense D585 Pro, та відкритий комплект розробника програмного забезпечення для Isaac ROS і платформи Edge AI Jetson Thor.

Open Machine Tending Solution від Intrinsic, референтний додаток для обслуговування верстатів з числовим програмним керуванням і частина нововипущеного відкритого набору Intrinsic Core, включає вбудовану сумісність з FoundationPose для готової реєстрації об’єктів, відстеження та оцінки поз. Magna використовує Isaac ROS як модульну, GPU‑прискорену основу для роботизованого сприйняття, синхронізованого збору даних та розгортання моделей Isaac GR00T, у поєднанні з апаратно‑в‑цикл тестуванням Isaac Sim. Seeed Studio поєднує Isaac ROS зі своїм reBot Arm, забезпечуючи прискорене сприйняття, просторове розуміння та планування руху на Jetson Thor.

Ekumen, компанія Grid Dynamics, використовує пакети Isaac ROS з прискоренням GPU у існуючих стекових рішеннях ROS і Nav2 для підвищення точності стягнення, 3D‑детекції перешкод, візуальної локалізації та планування руху в режимі реального часу. У повідомленні зазначається, що Ekumen застосовує isaac_ros_cumotion GPU для побудови шляху без зіткнень для складського маніпулятора за приблизно 2‑5 мілісекунд. Flexiv інтегрує Isaac ROS зі своїм адаптивним роботом Rizon 4, переходячи від тестових застосувань у Isaac Sim до їх розгортання на фізичному роботові.

Foxglove, партнер Isaac ROS, інтегрує веб‑ та десктоп‑інструменти для візуалізації та налагодження живих ROS‑застосувань протягом навчальних курсів Isaac ROS. Інструмент управління пакетами Pixi від Prefix.dev створює відтворювані середовища розробки роботів, об’єднуючи ROS з платформою CUDA. Ouster інтегрує стереокамери ZED від Stereolabs з Isaac ROS, забезпечуючи прискорену GPU‑перцепцію для реального часу виявлення об’єктів, картографування та навігації.

Isaac ROS 5.0 підтримує масштабовані обчислення, від базового Jetson Orin Nano до високопродуктивних пристроїв Jetson Thor. NVIDIA описує Jetson як масштабовану обчислювальну платформу для запуску фізичного AI‑стеку на краю, і зазначає, що робототехнічні компанії вже використовують поєднання Isaac ROS і Jetson, щоб перенести більше AI‑обробки безпосередньо на свої машини.

Mentee Robotics використовує Isaac ROS як основу перцепції та AI для свого гуманоїда MenteeBot, з єдиною програмною базою для платформ Jetson Orin і Jetson Thor. Universal Robots вбудувала Isaac ROS у свій SDK AI Accelerator, що працює на Jetson на краю, щоб допомогти інтеграторам розгортати передові можливості перцепції та руху без необхідності розробляти складне робототехнічне програмне забезпечення з нуля.

ROBOTIS, розробник TurtleBot3 на базі ROS, інтегрує Isaac ROS у свій робот AI Worker, використовуючи прискорену GPU‑перцепцію об’єктів для завдань маніпуляції, керованих візуально, включаючи підйом, розміщення та вирівнювання. FieldAI інтегрує Isaac ROS на пристроях Jetson для своїх фундаментальних моделей роботів, які можуть працювати повністю на роботах без залежності від хмарного підключення. Noble Machines використовує Isaac ROS на Jetson, щоб прискорити розробку універсальних роботів для промислових застосувань.

Open Source Robotics Alliance запрошує розробників створювати сумісні бекенди буферів і пакети конвертації, поширювати їх під відкритими ліцензіями та приєднуватися до робочої групи з прискореного транспорту пам’яті, яка збирається кожні два тижні.