NVIDIA Isaac ROS 5.0 přidává agentní dovednosti a podporu ROS Lyrical

Společnost NVIDIA vydala 22. září 2026 na konferenci ROSCon v Torontu Isaac ROS 5.0, soubor balíčků akcelerovaných pomocí GPU, který je postaven na otevřeném rámci ROS. Verze přidává agentní vývojové postupy, podporu platformy ROS Lyrical a Ubuntu 24.04 a nové funkce vnímání.

ROS je projekt organizace Open Robotics, který poskytuje open-source základ pro velkou část moderního vývoje robotiky a nabízí vývojářům společné nástroje, knihovny a standardy pro vytváření a propojování robotických aplikací. Podle společnosti NVIDIA přináší Isaac ROS její akcelerované výpočty, modely fyzické AI a knihovny připravené pro produkci téměř 1,3 milionu uživatelů ROS.

Isaac ROS 5.0 zavádí podporu ROS Lyrical a Ubuntu 24.04, takže vývojáři mohou přejít na nejnovější platformu ROS a nadále akcelerovat náročné robotické úlohy pomocí výpočetní techniky NVIDIA. Verze je již dostupná zdarma a jako open source, včetně dokumentace a úvodních materiálů na GitHubu.

Agentní dovednosti a modely vnímání

Verze přináší nové dovednosti NVIDIA Isaac pro nastavení a manipulaci. NVIDIA je popisuje jako opakovaně použitelné pracovní postupy, které mohou vývojáři a agenti AI využít k dokončení úloh při vývoji robotiky. Dokumentace připravená pro agenty podle společnosti NVIDIA také usnadňuje agentům AI porozumět nástrojům a pracovním postupům Isaac ROS, a rychleji tak převádět záměr vývojáře do fungujících aplikací.

Mezi nové dovednosti patří podle společnosti NVIDIA jemné doladění FoundationStereo, které umožňuje agentovi AI pomoci přizpůsobit model stereoskopického vnímání kamerám, prostředí a robotické aplikaci vývojáře. Vývojáři tak mohou získat přesnější vnímání pro danou konfiguraci senzorů. FoundationPose, základní model společnosti NVIDIA pro odhad a sledování polohy objektů, nyní nabízí inferenční knihovnu připravenou pro agenty, která podle společnosti NVIDIA umožňuje robotům vnímat a sledovat polohu a orientaci objektů až 5,5krát rychleji.

Uchopení a umístění, běžný pracovní postup propojující detekci, odhad hloubky a výstup polohy, je nyní dostupné jako samostatná dovednost připravená pro agenty, kterou mohou vývojáři robotů používat i mimo Isaac ROS.

Dodavatelsky neutrální přenos paměti v ROS Lyrical

NVIDIA spolupracovala s Open Source Robotics Alliance a přispěla do ROS Lyrical standardním rozhraním pro práci s daty. Podle společnosti NVIDIA pomáhá robotickému softwaru efektivně fungovat na různém výpočetním hardwaru včetně GPU. Rozhraní je dostupné celé komunitě ROS a poskytuje vývojářům jednotný způsob akcelerace náročných robotických aplikací, přičemž CUDA slouží jako funkční příklad akcelerace pomocí GPU.

Aliance označuje přidanou funkci rosidl::buffer za jednu z klíčových funkcí ROS Lyrical Luth, nejnovější verze ROS s dlouhodobou podporou, která byla vydána 23. května 2026. Funkce, kterou iniciovala a poskytla NVIDIA, umožňuje zrychlený přenos mezi pamětí CPU, pamětí GPU nebo jakoukoli jinou paměťovou doménou poskytovanou dodavatelem. Používá společnou strukturu pro reprezentaci a přenos externě spravované paměti, čímž odstraňuje potřebu vytvářet nový typ zprávy pro každý akcelerátor nebo knihovnu.

Podle aliance návrh zachovává standardní zprávy ROS, vydavatele, odběratele, hranice uzlů i middleware ROS a implementace middlewaru mohou načítat backendy vyrovnávací paměti jako pluginy. Dodavatelé mohou vytvářet knihovny vyrovnávací paměti, které vývojářům poskytují bezpečný a uživatelsky přístupný způsob práce s určitým typem hardwarové paměti, a převodní balíčky mohou přizpůsobovat zprávy ROS rámcům, jako jsou PyTorch nebo CV-CUDA. Aliance upozorňuje, že přenos bez kopírování je dostupný jako cesta závislá na backendu, nikoli jako univerzální záruka, protože závisí na faktorech, jako jsou vzájemná kompatibilita, umístění, přenos a možnosti paměti.

V příspěvku ze dne 20. září 2026 na webu Open Source Robotics Alliance uvedl vedoucí projektu ROS Michael J. Carroll: „NVIDIA byla v přístupu k implementaci práce s vyrovnávací pamětí skutečně vzorem. Nepřenesla ji jednoduše zpět na nás, ale iniciovala rozsáhlou spolupráci a zapojení komunity.“

Integrace ekosystému a nasazení přímo v robotu

Vydání společnosti NVIDIA popisuje robotický ekosystém, který již tento agentní přístup rozšiřuje. AgenticROS, open-source projekt podporovaný společností RealSense zabývající se technologiemi 3D vnímání, propojuje Isaac ROS s otevřenými modely NVIDIA Nemotron a plány NemoClaw, což umožňuje agentům AI komunikovat s roboty založenými na ROS. RealSense také optimalizuje své stereoskopické 3D hloubkové kamery nativně využívající AI, včetně RealSense D585 Pro, a open-source sadu pro vývoj softwaru pro Isaac ROS a platformu okrajové AI Jetson Thor.

Open Machine Tending Solution společnosti Intrinsic, referenční aplikace pro obsluhu číslicově řízených strojů a součást nově vydané open-source sady Intrinsic Core, obsahuje integrovanou kompatibilitu s FoundationPose pro okamžitou registraci, sledování a odhad polohy objektů. Magna používá Isaac ROS jako modulární základ akcelerovaný pomocí GPU pro robotické vnímání, synchronizovaný sběr dat a nasazení modelu Isaac GR00T spolu s testováním hardwaru ve smyčce v Isaac Sim. Seeed Studio kombinuje Isaac ROS se svým ramenem reBot Arm a na platformě Jetson Thor provozuje akcelerované vnímání, prostorové porozumění a plánování pohybu.

Ekumen, společnost ze skupiny Grid Dynamics, používá balíčky Isaac ROS akcelerované pomocí GPU ve stávajících sadách ROS a Nav2 ke zlepšení přesného dokování, detekce 3D překážek, vizuální lokalizace a plánování pohybu v reálném čase. Příspěvek uvádí, že Ekumen používá isaac_ros_cumotion na GPU k naplánování bezkolizní trasy pro skladové robotické rameno přibližně za 2 až 5 milisekund. Flexiv integruje Isaac ROS se svým adaptivním robotem Rizon 4 a vytváří cestu od testování aplikací v Isaac Sim k jejich nasazení na fyzickém robotu.

Foxglove, partner Isaac ROS, integruje do výukových materiálů Isaac ROS webové a desktopové nástroje pro vizualizaci a ladění živých aplikací ROS. Nástroj Pixi pro správu balíčků od Prefix.dev vytváří reprodukovatelná vývojová prostředí pro roboty a propojuje ROS s platformou CUDA. Ouster integruje stereoskopické kamery Stereolabs ZED s Isaac ROS, aby nabídl vnímání akcelerované pomocí GPU pro detekci objektů, mapování a navigaci v reálném čase.

Isaac ROS 5.0 podporuje škálovatelný výpočetní výkon od základní platformy Jetson Orin Nano po vysoce výkonná zařízení Jetson Thor. NVIDIA popisuje Jetson jako škálovatelnou výpočetní platformu pro provoz fyzické AI na okraji sítě a uvádí, že robotické společnosti již kombinaci Isaac ROS a Jetson používají k přesunu větší části zpracování AI přímo do svých strojů.

Mentee Robotics používá Isaac ROS jako základ vnímání a AI svého humanoida MenteeBot se společnou softwarovou základnou pro platformy Jetson Orin a Jetson Thor. Universal Robots začlenila Isaac ROS do své sady pro vývoj softwaru AI Accelerator, kterou na okraji sítě pohání Jetson, aby integrátorům pomohla nasazovat pokročilé funkce vnímání a pohybu bez nutnosti vyvíjet složitý robotický software od začátku.

ROBOTIS, výrobce robota TurtleBot3 založeného na ROS, integruje Isaac ROS do svého robota AI Worker a používá vnímání objektů akcelerované pomocí GPU pro úlohy manipulace řízené zrakem, včetně uchopení, umístění a zarovnání. FieldAI integruje Isaac ROS na zařízeních Jetson pro své základní modely robotů, které mohou běžet celé přímo na robotech bez závislosti na připojení ke cloudu. Noble Machines používá Isaac ROS na platformě Jetson k urychlení vývoje univerzálních robotů pro průmyslové aplikace.

Open Source Robotics Alliance vyzývá vývojáře, aby vytvářeli kompatibilní backendy vyrovnávací paměti a převodní balíčky, sdíleli je pod open-source licencemi a zapojili se do pracovní skupiny pro akcelerovaný přenos paměti, která se schází každý druhý týden.