Το Isaac ROS 5.0 της NVIDIA προσθέτει δεξιότητες για πράκτορες AI και υποστήριξη ROS Lyrical

Η NVIDIA κυκλοφόρησε το Isaac ROS 5.0, μια συλλογή πακέτων επιταχυνόμενων από GPU που βασίζονται στο ανοιχτό πλαίσιο ROS, στις 22 Σεπτεμβρίου 2026, στο συνέδριο ROSCon στο Τορόντο, προσθέτοντας ροές εργασίας ανάπτυξης με πράκτορες AI, υποστήριξη για την πλατφόρμα ROS Lyrical και το Ubuntu 24.04, καθώς και νέες δυνατότητες αντίληψης.

Το ROS είναι ένα έργο της Open Robotics που παρέχει τη βάση ανοιχτού κώδικα για μεγάλο μέρος της σύγχρονης ανάπτυξης ρομποτικής, προσφέροντας στους προγραμματιστές κοινά εργαλεία, βιβλιοθήκες και πρότυπα για τη δημιουργία και τη σύνδεση εφαρμογών ρομπότ. Η NVIDIA δήλωσε ότι το Isaac ROS φέρνει την επιταχυνόμενη υπολογιστική της, τα μοντέλα AI για τον φυσικό κόσμο και τις έτοιμες για παραγωγή βιβλιοθήκες σε σχεδόν 1,3 εκατομμύρια χρήστες ROS.

Το Isaac ROS 5.0 εισάγει υποστήριξη για το ROS Lyrical και το Ubuntu 24.04, προσφέροντας στους προγραμματιστές ένα μονοπάτι για την υιοθέτηση της τελευταίας πλατφόρμας ROS, ενώ συνεχίζει να επιταχύνει απαιτητικά φορτία ρομποτικής με την υπολογιστική τεχνολογία της NVIDIA. Η κυκλοφορία είναι διαθέσιμη τώρα, δωρεάν και ανοιχτού κώδικα, με τεκμηρίωση και υλικό εκκίνησης στο GitHub.

Δεξιότητες για Πράκτορες AI και Μοντέλα Αντίληψης

Η κυκλοφορία παρουσιάζει νέες δεξιότητες NVIDIA Isaac για ρύθμιση και χειρισμό αντικειμένων, τις οποίες η NVIDIA περιέγραψε ως επαναχρησιμοποιήσιμες ροές εργασίας που οι προγραμματιστές και οι πράκτορες AI μπορούν να χρησιμοποιήσουν για την ολοκλήρωση εργασιών ανάπτυξης ρομποτικής. Η NVIDIA δήλωσε ότι η τεκμηρίωση προσαρμοσμένη για πράκτορες AI διευκολύνει επίσης τους πράκτορες AI να κατανοήσουν τα εργαλεία και τις ροές εργασίας του Isaac ROS, μετατρέποντας την πρόθεση του προγραμματιστή σε λειτουργικές εφαρμογές πιο γρήγορα.

Ανάμεσα στις νέες δεξιότητες, η NVIDIA ανέφερε ότι μια δεξιότητα λεπτομερούς προσαρμογής του FoundationStereo επιτρέπει σε έναν πράκτορα AI να βοηθήσει στην προσαρμογή ενός μοντέλου στερεοσκοπικής αντίληψης στις κάμερες, το περιβάλλον και τη ρομποτική εφαρμογή του προγραμματιστή, ώστε οι προγραμματιστές να επιτύχουν πιο ακριβή αντίληψη για μια δεδομένη διαμόρφωση αισθητήρων. Το FoundationPose, το θεμελιώδες μοντέλο της NVIDIA για εκτίμηση και παρακολούθηση της θέσης και του προσανατολισμού αντικειμένων, παρέχει πλέον μια βιβλιοθήκη εξαγωγής συμπερασμάτων προσαρμοσμένη για πράκτορες AI, η οποία, σύμφωνα με τη NVIDIA, επιτρέπει στα ρομπότ να αντιλαμβάνονται και να παρακολουθούν τη θέση και τον προσανατολισμό αντικειμένων έως και 5,5 φορές πιο γρήγορα.

Η διαδικασία «πιάσε και τοποθέτησε», μια κοινή ροή εργασίας που συνδέει την ανίχνευση, την εκτίμηση βάθους και την έξοδο θέσης και προσανατολισμού, είναι πλέον διαθέσιμη ως ανεξάρτητη δεξιότητα προσαρμοσμένη για πράκτορες AI, την οποία οι προγραμματιστές ρομπότ μπορούν να χρησιμοποιήσουν εκτός του Isaac ROS.

Ανεξάρτητη από προμηθευτή Μεταφορά Μνήμης στο ROS Lyrical

Η NVIDIA συνεργάστηκε με το Open Source Robotics Alliance για να συνεισφέρει μια τυποποιημένη διεπαφή διαχείρισης δεδομένων στο ROS Lyrical, η οποία, σύμφωνα με τη NVIDIA, βοηθά το λογισμικό ρομποτικής να λειτουργεί αποδοτικά σε διαφορετικό υλικό υπολογισμού, συμπεριλαμβανομένων των GPU. Διαθέσιμη σε ολόκληρη την κοινότητα ROS, η διεπαφή προσφέρει στους προγραμματιστές έναν συνεπή τρόπο για την επιτάχυνση απαιτητικών εφαρμογών ρομποτικής, με το CUDA να παρέχει ένα λειτουργικό παράδειγμα για επιτάχυνση GPU.

Η συμμαχία περιγράφει τη συνεισφερόμενη λειτουργία, rosidl::buffer, ως ένα από τα βασικά χαρακτηριστικά του ROS Lyrical Luth, της τελευταίας έκδοσης με μακροπρόθεσμη υποστήριξη του ROS, η οποία κυκλοφόρησε στις 23 Μαΐου 2026. Η λειτουργία αυτή αναπτύχθηκε με πρωτοβουλία και συνεισφορά της NVIDIA και επιτρέπει επιταχυμένη μεταφορά μεταξύ μνήμης CPU, μνήμης GPU ή οποιουδήποτε άλλου τομέα μνήμης που παρέχει ένας προμηθευτής, χρησιμοποιώντας μια κοινή σύνθεση για την αναπαράσταση και τη μεταφορά εξωτερικά διαχειριζόμενης μνήμης, εξαλείφοντας την ανάγκη δημιουργίας νέου τύπου μηνύματος για κάθε επιταχυντή ή βιβλιοθήκη.

Σύμφωνα με τη συμμαχία, ο σχεδιασμός διατηρεί τα τυπικά μηνύματα ROS, τους εκδότες, τους συνδρομητές, τα όρια κόμβων και το middleware του ROS, ενώ οι υλοποιήσεις middleware μπορούν να φορτώσουν τα backend του buffer ως πρόσθετα. Οι προμηθευτές μπορούν να δημιουργήσουν βιβλιοθήκες buffer που παρέχουν στους προγραμματιστές ασφαλή, προσανατολισμένη προς το χρήστη πρόσβαση σε έναν τύπο μνήμης υλικού, και τα πακέτα μετατροπής μπορούν να προσαρμόσουν τα μηνύματα ROS σε πλαίσια όπως το PyTorch ή το CV-CUDA. Η συμμαχία σημειώνει ότι η μεταφορά χωρίς αντιγραφή είναι διαθέσιμη ως διαδρομή εξαρτημένη από το backend και όχι ως καθολική εγγύηση, ανάλογα με μεταβλητές όπως η συμβατότητα μεταξύ ομότιμων, η τοπικότητα, η μεταφορά και οι δυνατότητες μνήμης.

Σε ανάρτηση της 20ης Σεπτεμβρίου 2026 στον ιστότοπο του Open Source Robotics Alliance, ο ηγέτης του έργου ROS, Michael J. Carroll, δήλωσε: «Η NVIDIA ήταν πραγματικά παράδειγμα στο πώς προχώρησε στην υλοποίηση της εργασίας buffer. Δεν μετέφερε απλώς την εργασία πίσω σε εμάς, αλλά ξεκίνησε εκτενή συνεργασία και ζήτησε τη συμβολή της κοινότητας.»

Ενσωματώσεις στο Οικοσύστημα και Εγκατάσταση στο Ρομπότ

Η κυκλοφορία της NVIDIA περιγράφει ένα οικοσύστημα ρομποτικής που ήδη επεκτείνει αυτήν την προσέγγιση με πράκτορες AI. Το AgenticROS, ένα έργο ανοιχτού κώδικα που χρηματοδοτείται από την εταιρεία τεχνολογίας 3D αντίληψης RealSense, συνδέει το Isaac ROS με τα ανοιχτά μοντέλα NVIDIA Nemotron και τα σχέδια NemoClaw, επιτρέποντας στους πράκτορες AI να αλληλεπιδρούν με ρομπότ βασισμένα σε ROS. Η RealSense επίσης βελτιστοποιεί τις δικές της 3D στερεοσκοπικές κάμερες βάθους με εγγενή υποστήριξη AI, συμπεριλαμβανομένου του RealSense D585 Pro, καθώς και ένα κιτ ανάπτυξης λογισμικού ανοιχτού κώδικα για το Isaac ROS και την πλατφόρμα Edge AI Jetson Thor.

Η λύση Intrinsic Open Machine Tending, μια εφαρμογή αναφοράς για την τροφοδοσία και εκφόρτωση εργαλειομηχανών με αριθμητικό έλεγχο υπολογιστή και μέρος της πρόσφατα κυκλοφορούσας ανοιχτού κώδικα σειράς Intrinsic Core, περιλαμβάνει ενσωματωμένη συμβατότητα με το FoundationPose για άμεσα διαθέσιμη χωρική καταχώριση αντικειμένων, παρακολούθηση και εκτίμηση θέσης και προσανατολισμού. Η Magna χρησιμοποιεί το Isaac ROS ως μια αρθρωτή βάση με επιτάχυνση GPU για ρομποτική αντίληψη, συγχρονισμένη συλλογή δεδομένων και εγκατάσταση του μοντέλου Isaac GR00T, σε συνδυασμό με δοκιμές hardware-in-the-loop στο Isaac Sim. Η Seeed Studio συνδυάζει το Isaac ROS με το reBot Arm της, εκτελώντας επιταχυνόμενη αντίληψη, χωρική κατανόηση και σχεδιασμό κίνησης στο Jetson Thor.

Η Ekumen, μια εταιρεία του Grid Dynamics, χρησιμοποιεί πακέτα Isaac ROS επιταχυνόμενα με GPU εντός των υφιστάμενων στοίβων ROS και Nav2 για τη βελτίωση της προσέγγισης και σύνδεσης ακριβείας, της ανίχνευσης εμποδίων 3Δ, του οπτικού εντοπισμού και του προγραμματισμού κίνησης σε πραγματικό χρόνο. Η ανάρτηση αναφέρει ότι η Ekumen χρησιμοποιεί isaac_ros_cumotion σε GPU για τον υπολογισμό μιας διαδρομής χωρίς συγκρούσεις για έναν ρομποτικό βραχίονα αποθήκης σε περίπου 2 έως 5 χιλιοστά του δευτερολέπτου. Η Flexiv ενσωματώνει το Isaac ROS με το προσαρμοστικό ρομπότ Rizon 4, με μια διαδρομή από τη δοκιμή εφαρμογών στο Isaac Sim μέχρι την εγκατάστασή τους σε φυσικό ρομπότ.

Η Foxglove, ένας συνεργάτης του Isaac ROS, ενσωματώνει εργαλεία ιστού και επιφάνειας εργασίας για την οπτικοποίηση και την αποσφαλμάτωση ζωντανών εφαρμογών ROS κατά τη διάρκεια των εκπαιδευτικών σεμιναρίων Isaac ROS. Το εργαλείο διαχείρισης πακέτων Pixi της Prefix.dev δημιουργεί επαναλήψιμα περιβάλλοντα ανάπτυξης ρομπότ, φέρνοντας το ROS σε συνδυασμό με την πλατφόρμα CUDA. Η Ouster ενσωματώνει τις στερεοσκοπικές κάμερες ZED της Stereolabs με το Isaac ROS για την παροχή αντίληψης επιταχυνόμενης με GPU για ανίχνευση αντικειμένων σε πραγματικό χρόνο, χαρτογράφηση και πλοήγηση.

Το Isaac ROS 5.0 υποστηρίζει επεκτάσιμη υπολογιστική ισχύ, από το εισαγωγικό Jetson Orin Nano μέχρι τις υψηλών επιδόσεων συσκευές Jetson Thor. Η NVIDIA περιγράφει το Jetson ως μια επεκτάσιμη πλατφόρμα υπολογισμού για την εκτέλεση της στοίβας AI για τον φυσικό κόσμο σε συσκευές edge, και ανέφερε ότι οι εταιρείες ρομποτικής χρησιμοποιούν ήδη τον συνδυασμό Isaac ROS και Jetson για να φέρουν περισσότερη επεξεργασία AI απευθείας στα μηχανήματά τους.

Η Mentee Robotics χρησιμοποιεί το Isaac ROS ως τη βάση αντίληψης και AI του ανθρωποειδούς MenteeBot, με κοινή λογισμική βάση σε πλατφόρμες Jetson Orin και Jetson Thor. Η Universal Robots έχει ενσωματώσει το Isaac ROS στο AI Accelerator SDK της, τροφοδοτούμενο από Jetson σε συσκευές edge, για να βοηθήσει τους ολοκληρωτές συστημάτων να αναπτύξουν προηγμένες δυνατότητες αντίληψης και κίνησης χωρίς να αναπτύξουν πολύπλοκο λογισμικό ρομποτικής από την αρχή.

Η ROBOTIS, κατασκευάστρια του TurtleBot3 βασισμένου στο ROS, ενσωματώνει το Isaac ROS στο ρομπότ AI Worker, χρησιμοποιώντας αντίληψη αντικειμένων επιταχυνόμενη με GPU για εργασίες χειρισμού καθοδηγούμενες από όραση, όπως η σύλληψη, η τοποθέτηση και η ευθυγράμμιση. Η FieldAI ενσωματώνει το Isaac ROS σε συσκευές Jetson για τα δικά της θεμελιώδη μοντέλα για ρομπότ, τα οποία μπορούν να λειτουργούν εξ ολοκλήρου σε ρομπότ χωρίς εξάρτηση από σύνδεση στο σύννεφο. Η Noble Machines χρησιμοποιεί το Isaac ROS σε Jetson για την επιτάχυνση της ανάπτυξης γενικού σκοπού ρομπότ για βιομηχανικές εφαρμογές.

Η Open Source Robotics Alliance προσκαλεί τους προγραμματιστές να δημιουργήσουν συμβατά backends buffer και πακέτα μετατροπής, να τα μοιραστούν υπό ανοιχτές άδειες λογισμικού και να ενταχθούν στην ομάδα εργασίας επιταχυνόμενης μεταφοράς μνήμης, η οποία συναντιέται κάθε δεύτερη εβδομάδα.