Hesai lancia Kosmo per trasformare le scansioni del mondo reale in dati di addestramento per robot

Il 14 ottobre 2026, Hesai Group ha lanciato Kosmo, un motore di dati 3D del mondo che combina la sua camera spaziale Kosmo One con la piattaforma cloud Kosmo World, convertendo gli ambienti fisici in spazi digitali 3D ad alta fedeltà, utilizzati per l’addestramento dei robot, lo sviluppo di modelli del mondo e la creazione di contenuti immersivi.

Durante l’evento di lancio, l’azienda ha annunciato anche partnership strategiche con le società di IA incarnata Galbot e Dexmal e ha presentato applicazioni sviluppate con il motore di rendering RenderMan di Pixar e la piattaforma cartografica cinese Amap, per i settori della robotica, della produzione cinematografica e dei servizi basati sulla localizzazione.

Shaoqing Xiang, cofondatore e CTO di Hesai, ha affermato che l’IA fisica ha bisogno di dati del mondo reale accurati, accessibili e disponibili su larga scala, e che soddisfare contemporaneamente tutti e tre questi requisiti è da sempre un problema. «Kosmo è progettato per superare questa difficoltà, facilitando il lavoro degli sviluppatori di IA e dei creatori che vogliono trasformare gli ambienti reali in dati su cui addestrare i modelli e in risorse da utilizzare per le loro creazioni», ha dichiarato.

Hardware di acquisizione Kosmo One

Kosmo One è una camera spaziale IA a definizione ultraelevata 8K che combina lidar ad alta risoluzione, un sensore di immagine da un pollice e un’unità di misura inerziale ad alta precisione; registra geometria, colore, texture e posizione della camera con una sincronizzazione al livello del microsecondo. Hesai la descrive come la prima camera spaziale IA al mondo dotata di un sistema di acquisizione delle immagini 8K integrato; in una nota, l’azienda precisa che questa definizione si basa sulle informazioni sui prodotti disponibili al pubblico a ottobre 2026. Il valore 8K si riferisce alla risoluzione massima di acquisizione; la risoluzione massima che gli utenti possono esportare è 6K.

Secondo Hesai, la ricostruzione tramite 3D Gaussian Splatting della camera raggiunge una precisione geometrica al millimetro e riproduce materiali, illuminazione e ombre. La camera consente di avviare subito la scansione all’accensione, offre una guida intelligente e permette di riprendere una scansione con un solo clic. L’azienda afferma che un singolo operatore può acquisire un tipico spazio interno di 100 metri quadrati in circa 15 minuti. In seguito, Kosmo World elabora i dati acquisiti e li trasforma in modelli 3D a una velocità fino a circa cinque volte superiore a quella di prodotti comparabili, secondo Hesai, che precisa che i risultati effettivi variano in base alla scena, al volume di dati e alle impostazioni dei parametri.

Kosmo World e l’implementazione presso Dairy Queen

Kosmo World permette di creare e gestire contenuti 3D su un’unica piattaforma, basata su quello che Hesai chiama Kosmo Spatial Core. Una sola ricostruzione produce, all’interno di una scena coerente, dati 3D Gaussian Splatting, mesh e di profondità. L’IA generativa completa le aree non rilevate dallo scanner e ricostruisce materiali e texture, mentre la segmentazione semantica identifica i singoli oggetti. Le visualizzazioni possono inoltre essere adattate alle caratteristiche della camera di un robot; secondo Hesai, questo contribuisce a ridurre il divario tra la simulazione e il funzionamento nel mondo reale.

Come esempio concreto, Hesai ha citato un’implementazione presso una gelateria Dairy Queen, dove in precedenza, secondo l’azienda, un team di professionisti impiegava circa 300 ore di modellazione manuale per realizzare un ambiente 3D per l’addestramento. Con Kosmo, la scansione e la ricostruzione hanno richiesto 15 minuti. In quell’implementazione, il tasso di successo del robot Sharpa nell’esecuzione dei compiti ha raggiunto il 99% e il tasso di errore è sceso a un decimo del livello precedente, consentendo al robot di iniziare a operare in un vero negozio, secondo Hesai.

Modelli del mondo, cinema e cartografia

Per lo sviluppo di modelli del mondo, Hesai ha dichiarato che le scene geometricamente accurate di Kosmo forniscono posizioni precise della camera, informazioni sulla profondità e visualizzazioni coerenti da più angolazioni, utilizzabili come riferimento del mondo reale per costruire ambienti virtuali. Da un singolo spazio acquisito si possono ricavare oltre 10.000 traiettorie di addestramento generate automaticamente, offrendo agli sviluppatori oltre 100 volte più dati di addestramento di alta qualità a parità di costo: Hesai definisce questo confronto rispetto al costo necessario per raccogliere una traiettoria di un robot nel mondo reale di alta qualità.

Per la produzione cinematografica, l’azienda stima che con Kosmo occorra una settimana per acquisire, ricostruire e montare una scena di strada europea di 10.000 metri quadrati, contro i circa due mesi necessari per realizzare fisicamente il set, e afferma che i costi complessivi possono diminuire fino all’80%. Per una scena d’interni di 200 metri quadrati, Hesai stima un impegno di circa due giornate-persona con Kosmo, rispetto alle circa 14 giornate-persona richieste dalla modellazione tradizionale in computer grafica. Hesai ha dichiarato che alcune aziende cinematografiche e televisive utilizzano già Kosmo in flussi di lavoro basati sul motore di rendering RenderMan di Pixar, progettato per produzioni professionali e corredato di un tutorial ufficiale con risorse scaricabili. L’azienda collabora inoltre con Yuemo Studio alla produzione cinematografica assistita dall’IA, che abbina ambienti reali acquisiti a contenuti generati dall’IA.

Hesai ha inoltre dichiarato di collaborare con TRIC, partner delle Nazioni Unite, alla creazione di un’opera d’arte digitale immersiva del Du Fu Thatched Cottage a Chengdu, l’antica residenza del poeta della dinastia Tang. Nell’ambito della partnership con Amap, le ricostruzioni del Gravity Art Museum e della PIFO Gallery sono già disponibili nella funzione Flying Street View di Amap. Hesai ha affermato che la piattaforma raggiunge quasi un miliardo di utenti attivi mensili e che l’obiettivo a lungo termine della partnership è passare da una navigazione che aiuta a trovare un negozio a una che permette di trovare un prodotto al suo interno.

Ecosistema aperto e moduli di attuazione

Hesai sta sviluppando Kosmo come ecosistema aperto di intelligenza spaziale, offrendo accesso aperto ai dati grezzi acquisiti e ad asset 3D, con integrazioni per NVIDIA Isaac Sim, Isaac Lab, Unreal Engine, RenderMan e Houdini. L’azienda ha descritto due modelli di business: soluzioni integrate hardware e software per i clienti dei settori della robotica, dei media e di altri comparti, e servizi dati che producono dati spaziali del mondo reale su vasta scala per gli sviluppatori di modelli del mondo e di IA fisica.

Hesai ha dichiarato che le consegne dei suoi lidar sono raddoppiate per nove anni consecutivi e che detiene una posizione di primo piano a livello globale nei sistemi ADAS per autovetture e nei robotaxi: una base su cui sta costruendo la prossima fase di crescita, incentrata sui dati 3D del mondo e sul movimento robotico. Il cofondatore e CEO Yifan “David” Li ha descritto il motore di dati 3D del mondo e il corrispondente motore di movimento robotico come il secondo motore di crescita dell’azienda. «Nell’ultimo decennio abbiamo permesso alle macchine di vedere il mondo», ha dichiarato Li. «Nel prossimo decennio permetteremo ai robot di comprenderlo e modificarlo».

Parallelamente a Kosmo, Hesai sta espandendo la propria attività nel campo degli attuatori robotici. I suoi moduli di attuazione alimentano la mano agile Wave di Sharpa, che, secondo l’azienda, offre una densità di potenza tripla rispetto a prodotti comparabili, in un formato più piccolo del 37%. Secondo Hesai, la mano è stata integrata nel progetto di riferimento del robot umanoide Isaac GR00T di NVIDIA ed è stata adottata da istituti di ricerca, tra cui UC Berkeley e Stanford. L’azienda ha dichiarato che, alla fine del secondo trimestre del 2026, le consegne cumulative dei suoi moduli di attuazione avevano superato le 10.000 unità e prevede che le spedizioni raggiungano le sei cifre nel 2027, man mano che la linea di prodotti si amplierà dai moduli per le mani alle articolazioni distribuite in tutto il corpo del robot.