Η Hesai λανσάρει το Kosmo για να μετατρέπει σαρώσεις του πραγματικού κόσμου σε δεδομένα εκπαίδευσης ρομπότ

Ο όμιλος Hesai λανσάρισε το Kosmo στις 14 Οκτωβρίου 2026: μια μηχανή τρισδιάστατων δεδομένων του κόσμου που συνδυάζει τη χωρική κάμερα Kosmo One με την πλατφόρμα cloud Kosmo World, μετατρέποντας τα φυσικά περιβάλλοντα σε τρισδιάστατους ψηφιακούς χώρους υψηλής πιστότητας, οι οποίοι χρησιμοποιούνται για την εκπαίδευση ρομπότ, την ανάπτυξη μοντέλων του κόσμου και τη δημιουργία καθηλωτικού περιεχομένου.

Στην εκδήλωση για το λανσάρισμα, η εταιρεία ανακοίνωσε επίσης στρατηγικές συνεργασίες με τις εταιρείες ενσώματης ΤΝ Galbot και Dexmal και παρουσίασε εφαρμογές που αναπτύχθηκαν με το λογισμικό απόδοσης RenderMan της Pixar και την κινεζική πλατφόρμα χαρτογράφησης Amap, οι οποίες καλύπτουν τη ρομποτική, την κινηματογραφική παραγωγή και τις υπηρεσίες τοποθεσίας.

Ο Shaoqing Xiang, συνιδρυτής και CTO της Hesai, δήλωσε ότι η Φυσική ΤΝ χρειάζεται δεδομένα από τον πραγματικό κόσμο που να είναι ακριβή, προσιτά και διαθέσιμα σε μεγάλη κλίμακα, και ότι η ταυτόχρονη κάλυψη και των τριών απαιτήσεων αποτελεί διαχρονικό πρόβλημα. «Το Kosmo έχει σχεδιαστεί για να ξεπεράσει αυτή την πρόκληση, διευκολύνοντας τους προγραμματιστές ΤΝ και τους δημιουργούς να μετατρέπουν πραγματικά περιβάλλοντα σε δεδομένα για την εκπαίδευση των μοντέλων τους και σε στοιχεία που μπορούν να αξιοποιήσουν στις κατασκευές τους», είπε.

Υλικό καταγραφής Kosmo One

Το Kosmo One είναι μια χωρική κάμερα ΤΝ υπερυψηλής ευκρίνειας 8K, η οποία συνδυάζει LiDAR υψηλής ανάλυσης, αισθητήρα απεικόνισης μίας ίντσας και μονάδα αδρανειακής μέτρησης υψηλής ακρίβειας. Καταγράφει γεωμετρία, χρώμα, υφή και θέση κάμερας με συγχρονισμό ακρίβειας μικροδευτερολέπτου. Η Hesai το περιγράφει ως την πρώτη χωρική κάμερα ΤΝ στον κόσμο με ενσωματωμένο σύστημα απεικόνισης 8K· σε υποσημείωση, η εταιρεία διευκρινίζει ότι ο χαρακτηρισμός αυτός βασίζεται σε δημόσια διαθέσιμες πληροφορίες προϊόντων έως τον Οκτώβριο του 2026. Η ένδειξη 8K αναφέρεται στη μέγιστη ανάλυση καταγραφής· η μέγιστη ανάλυση στην οποία μπορούν να εξαγάγουν οι χρήστες το υλικό είναι 6K.

Σύμφωνα με τη Hesai, η ανακατασκευή με 3D Gaussian Splatting της κάμερας επιτυγχάνει γεωμετρική ακρίβεια επιπέδου χιλιοστού, αποδίδοντας τα υλικά, τον φωτισμό και τις σκιές. Η κάμερα προσφέρει άμεση σάρωση με την ενεργοποίησή της, έξυπνη καθοδήγηση και συνέχιση της σάρωσης με ένα πάτημα. Η εταιρεία αναφέρει ότι ένας χειριστής μπορεί να σαρώσει έναν τυπικό εσωτερικό χώρο 100 τετραγωνικών μέτρων σε περίπου 15 λεπτά. Στη συνέχεια, το Kosmo World επεξεργάζεται τα δεδομένα που έχουν καταγραφεί και τα μετατρέπει σε τρισδιάστατα μοντέλα με ταχύτητα έως και περίπου πέντε φορές μεγαλύτερη από εκείνη συγκρίσιμων προϊόντων, σύμφωνα με τη Hesai, η οποία επισημαίνει ότι τα πραγματικά αποτελέσματα ποικίλλουν ανάλογα με τη σκηνή, τον όγκο των δεδομένων και τις ρυθμίσεις των παραμέτρων.

Kosmo World και η εγκατάσταση στο Dairy Queen

Το Kosmo World διαχειρίζεται τη δημιουργία και τη διαχείριση τρισδιάστατου περιεχομένου σε μία ενιαία πλατφόρμα, η οποία βασίζεται σε αυτό που η Hesai αποκαλεί Kosmo Spatial Core. Κάθε ανακατασκευή παράγει από κοινού δεδομένα 3D Gaussian Splatting, πλέγματος και βάθους, όλα ενταγμένα σε μια συνεκτική σκηνή. Η παραγωγική ΤΝ συμπληρώνει τα σημεία που δεν κατέγραψε ο σαρωτής και ανακατασκευάζει τα υλικά και τις υφές, ενώ η σημασιολογική τμηματοποίηση αναγνωρίζει μεμονωμένα αντικείμενα. Οι όψεις μπορούν επίσης να προσαρμοστούν στα χαρακτηριστικά της κάμερας ενός ρομπότ, κάτι που, σύμφωνα με τη Hesai, συμβάλλει στη γεφύρωση του χάσματος ανάμεσα στην προσομοίωση και τη λειτουργία στον πραγματικό κόσμο.

Ως πρακτικό παράδειγμα, η Hesai αναφέρθηκε σε μια εγκατάσταση σε κατάστημα παγωτού Dairy Queen, όπου, όπως δήλωσε η εταιρεία, μια επαγγελματική ομάδα χρειαζόταν προηγουμένως περίπου 300 ώρες χειρωνακτικής μοντελοποίησης για να δημιουργήσει ένα τρισδιάστατο περιβάλλον εκπαίδευσης. Με το Kosmo, η σάρωση και η ανακατασκευή διήρκεσαν 15 λεπτά. Στη συγκεκριμένη εγκατάσταση, το ποσοστό επιτυχίας του ρομπότ Sharpa στις εργασίες έφτασε το 99% και το ποσοστό αποτυχίας του μειώθηκε στο ένα δέκατο του προηγούμενου επιπέδου, επιτρέποντας στο ρομπότ να αρχίσει να λειτουργεί σε πραγματικό κατάστημα, σύμφωνα με τη Hesai.

Μοντέλα του κόσμου, κινηματογράφος και χαρτογράφηση

Για την ανάπτυξη μοντέλων του κόσμου, η Hesai δήλωσε ότι οι γεωμετρικά ακριβείς σκηνές του Kosmo προσφέρουν ακριβείς θέσεις κάμερας, πληροφορίες βάθους και συνεκτικές όψεις από πολλές γωνίες, παρέχοντας μια αναφορά από τον πραγματικό κόσμο για τη δημιουργία εικονικών περιβαλλόντων. Από έναν μόνο χώρο που έχει καταγραφεί μπορούν να προκύψουν περισσότερες από 10.000 τροχιές εκπαίδευσης, οι οποίες δημιουργούνται αυτόματα, προσφέροντας στους προγραμματιστές πάνω από 100 φορές περισσότερα δεδομένα εκπαίδευσης υψηλής ποιότητας με το ίδιο κόστος — σύγκριση που η Hesai ορίζει με βάση το κόστος συλλογής μίας τροχιάς ρομπότ υψηλής ποιότητας στον πραγματικό κόσμο.

Για κινηματογραφικές παραγωγές, η εταιρεία εκτιμά ότι η σάρωση, η ανακατασκευή και η επεξεργασία ενός ευρωπαϊκού αστικού τοπίου 10.000 τετραγωνικών μέτρων διαρκούν μία εβδομάδα με το Kosmo, σε σύγκριση με περίπου δύο μήνες για την κατασκευή του χώρου ως φυσικού σκηνικού, και αναφέρει ότι το συνολικό κόστος μπορεί να μειωθεί έως και κατά 80%. Για μια εσωτερική σκηνή 200 τετραγωνικών μέτρων, η Hesai υπολογίζει ότι με το Kosmo απαιτούνται περίπου δύο ανθρωποημέρες, έναντι περίπου 14 ανθρωποημερών για την παραδοσιακή μοντελοποίηση με γραφικά υπολογιστή (CG). Η Hesai δήλωσε ότι εταιρείες κινηματογράφου και τηλεόρασης χρησιμοποιούν ήδη το Kosmo σε ροές εργασίας που βασίζονται στο RenderMan της Pixar, ένα εργαλείο απόδοσης επαγγελματικών προδιαγραφών για παραγωγές, για το οποίο έχει κυκλοφορήσει επίσημο εκπαιδευτικό υλικό με πόρους προς λήψη. Η εταιρεία συνεργάζεται επίσης με το Yuemo Studio σε κινηματογραφικές παραγωγές με τη βοήθεια ΤΝ, οι οποίες συνδυάζουν καταγεγραμμένα περιβάλλοντα του πραγματικού κόσμου με περιεχόμενο που δημιουργείται από ΤΝ.

Η Hesai δήλωσε επίσης ότι συνεργάζεται με το TRIC, εταίρο των Ηνωμένων Εθνών, για τη δημιουργία ενός καθηλωτικού ψηφιακού έργου τέχνης για την Εξοχική Κατοικία με Αχυρένια Στέγη του Du Fu στο Chengdu, την πρώην κατοικία του ποιητή της δυναστείας Τανγκ. Στο πλαίσιο της συνεργασίας με την Amap, οι ανακατασκευές του Gravity Art Museum και του PIFO Gallery είναι ήδη διαθέσιμες στη λειτουργία Flying Street View της Amap. Η Hesai δήλωσε ότι η πλατφόρμα έχει σχεδόν ένα δισεκατομμύριο ενεργούς χρήστες κάθε μήνα και ότι μακροπρόθεσμος στόχος της συνεργασίας είναι η πλοήγηση να περάσει από την αναζήτηση ενός καταστήματος στην αναζήτηση ενός προϊόντος μέσα σε αυτό.

Ανοιχτό οικοσύστημα και μονάδες ενεργοποίησης

Η Hesai αναπτύσσει το Kosmo ως ένα ανοιχτό οικοσύστημα χωρικής νοημοσύνης, παρέχοντας ανοιχτή πρόσβαση σε ακατέργαστα δεδομένα λήψης και τρισδιάστατα στοιχεία, με ενσωματώσεις στα NVIDIA Isaac Sim, Isaac Lab, Unreal Engine, RenderMan και Houdini. Η εταιρεία περιέγραψε δύο επιχειρηματικά μοντέλα: ολοκληρωμένες λύσεις υλικού και λογισμικού για πελάτες στους κλάδους της ρομποτικής, των μέσων ενημέρωσης και άλλων βιομηχανιών, καθώς και υπηρεσίες δεδομένων που παράγουν χωρικά δεδομένα από τον πραγματικό κόσμο σε μεγάλη κλίμακα για προγραμματιστές μοντέλων κόσμου και φυσικής τεχνητής νοημοσύνης.

Η Hesai δήλωσε ότι οι παραδόσεις των lidar της διπλασιάζονταν επί εννέα συνεχόμενα χρόνια και ότι κατέχει ηγετική θέση στην παγκόσμια αγορά συστημάτων υποβοήθησης οδηγού (ADAS) για επιβατικά οχήματα και ρομποτικών ταξί· αυτή είναι η βάση πάνω στην οποία οικοδομεί την επόμενη φάση ανάπτυξής της, με επίκεντρο τα τρισδιάστατα δεδομένα του κόσμου και τη ρομποτική κίνηση. Ο συνιδρυτής και διευθύνων σύμβουλος Yifan «David» Li περιέγραψε τη μηχανή δεδομένων τρισδιάστατου κόσμου και μια συμπληρωματική μηχανή ρομποτικής κίνησης ως τον δεύτερο μοχλό ανάπτυξης της εταιρείας. «Την τελευταία δεκαετία, δώσαμε στις μηχανές τη δυνατότητα να βλέπουν τον κόσμο», δήλωσε ο Li. «Την επόμενη δεκαετία, θα δώσουμε στα ρομπότ τη δυνατότητα να τον κατανοούν και να τον αλλάζουν».

Παράλληλα με το Kosmo, η Hesai επεκτείνει τη δραστηριότητά της στις ρομποτικές μονάδες ενεργοποίησης. Οι μονάδες ενεργοποίησής της τροφοδοτούν το επιδέξιο χέρι Wave της Sharpa, το οποίο, σύμφωνα με την εταιρεία, προσφέρει τριπλάσια πυκνότητα ισχύος από αντίστοιχα προϊόντα, σε συσκευασία κατά 37% μικρότερη. Σύμφωνα με τη Hesai, το χέρι έχει ενσωματωθεί στον σχεδιασμό αναφοράς του ανθρωποειδούς ρομπότ Isaac GR00T της NVIDIA και έχει υιοθετηθεί από ερευνητικά ιδρύματα, μεταξύ των οποίων το UC Berkeley και το Stanford. Η εταιρεία δήλωσε ότι οι σωρευτικές παραδόσεις των μονάδων ενεργοποίησής της ξεπέρασαν τις 10.000 μονάδες έως το τέλος του δεύτερου τριμήνου του 2026 και ότι αναμένει οι αποστολές να φτάσουν σε εξαψήφιο αριθμό το 2027, καθώς η σειρά προϊόντων επεκτείνεται από μονάδες για χέρια σε αρθρώσεις σε όλο το σώμα του ρομπότ.