Hesai lansează Kosmo pentru a transforma scanările din lumea reală în date pentru antrenarea roboților

Hesai Group a lansat Kosmo pe 14 octombrie 2026, un motor de date 3D despre lume care combină camera spațială Kosmo One cu platforma cloud Kosmo World și transformă mediile fizice în spații digitale 3D de înaltă fidelitate, utilizate pentru antrenarea roboților, dezvoltarea modelelor lumii și crearea de conținut captivant.

La evenimentul de lansare, compania a anunțat și parteneriate strategice cu companiile de IA întrupată Galbot și Dexmal și a prezentat aplicații dezvoltate cu motorul de randare RenderMan al Pixar și platforma chineză de cartografiere Amap, pentru domenii precum robotica, cinematografia și serviciile de localizare.

Shaoqing Xiang, cofondator și director tehnic (CTO) al Hesai, a declarat că IA fizică are nevoie de date din lumea reală care să fie precise, accesibile ca preț și disponibile la scară largă și că îndeplinirea simultană a tuturor celor trei cerințe a fost o problemă persistentă. „Kosmo este concepută pentru a depăși această provocare, facilitând transformarea mediilor reale în date pe baza cărora dezvoltatorii de IA pot antrena modele și în resurse pe care creatorii le pot folosi în proiectele lor”, a spus el.

Echipamentul de captare Kosmo One

Kosmo One este o cameră spațială cu IA, cu rezoluție ultraînaltă de 8K, care combină un lidar de înaltă rezoluție, un senzor de imagine de un inch și o unitate de măsurare inerțială de înaltă precizie. Aceasta înregistrează geometria, culoarea, textura și poziția camerei, cu sincronizare la nivel de microsecundă. Hesai o descrie drept prima cameră spațială cu IA din lume care dispune de un sistem de imagistică 8K integrat; compania precizează într-o notă de subsol că această desemnare se bazează pe informațiile despre produse disponibile public în octombrie 2026. Valoarea de 8K se referă la rezoluția maximă de captare; rezoluția maximă la care pot exporta utilizatorii este de 6K.

Potrivit Hesai, reconstrucția prin splatting gaussian 3D realizată de cameră atinge o precizie geometrică la nivel de milimetru și reproduce materialele, iluminarea și umbrele. Camera permite scanarea instantanee la pornire, oferă ghidare inteligentă și permite reluarea scanării printr-o singură apăsare. Compania afirmă că un singur operator poate scana un spațiu interior obișnuit de 100 de metri pătrați în aproximativ 15 minute. Apoi, Kosmo World prelucrează datele captate și le transformă în modele 3D cu o viteză de până la aproximativ cinci ori mai mare decât cea a produselor comparabile, afirmă Hesai, precizând totodată că rezultatele efective variază în funcție de scenă, volumul de date și setările parametrilor.

Kosmo World și implementarea de la Dairy Queen

Kosmo World gestionează crearea și administrarea conținutului 3D pe o singură platformă, susținută de ceea ce Hesai numește Kosmo Spatial Core. O singură reconstrucție generează împreună date de splatting gaussian 3D, o rețea poligonală și date de profunzime, într-o scenă coerentă. IA generativă completează zonele omise de scaner și reconstruiește materialele și texturile, iar segmentarea semantică identifică obiectele individuale. De asemenea, perspectivele pot fi adaptate la caracteristicile camerei unui robot, ceea ce, potrivit Hesai, ajută la reducerea diferenței dintre simulare și funcționarea în lumea reală.

Ca exemplu practic, Hesai a indicat o implementare într-o gelaterie Dairy Queen, unde, potrivit companiei, o echipă de profesioniști avea nevoie anterior de aproximativ 300 de ore de modelare manuală pentru a crea un mediu 3D de antrenare. Cu Kosmo, scanarea și reconstrucția au durat 15 minute. În cadrul acestei implementări, rata de reușită a sarcinilor unui robot Sharpa a ajuns la 99%, iar rata de eșec a scăzut la o zecime din nivelul anterior, permițând robotului să înceapă să funcționeze într-un magazin real, potrivit Hesai.

Modelele lumii, filmul și cartografierea

Pentru dezvoltarea modelelor lumii, Hesai a declarat că scenele Kosmo, precise din punct de vedere geometric, oferă poziții exacte ale camerei, informații despre profunzime și perspective consecvente din mai multe unghiuri, ca referință din lumea reală pentru construirea mediilor virtuale. Un singur spațiu captat poate genera automat peste 10.000 de traiectorii de antrenare, oferind dezvoltatorilor de peste 100 de ori mai multe date de antrenare de înaltă calitate, la același cost — o comparație pe care Hesai o definește prin raportare la costul colectării unei singure traiectorii de înaltă calitate a unui robot în lumea reală.

Pentru producțiile cinematografice, compania estimează că scanarea, reconstruirea și editarea unui peisaj urban european de 10.000 de metri pătrați durează o săptămână cu Kosmo, față de aproximativ două luni pentru construirea decorului fizic al locației, și afirmă că costurile totale pot scădea cu până la 80%. Pentru o scenă de interior de 200 de metri pătrați, Hesai estimează efortul la aproximativ două zile-persoană cu Kosmo, față de circa 14 zile-persoană pentru modelarea tradițională pe calculator. Hesai a declarat că firmele de film și televiziune folosesc deja Kosmo în fluxuri de lucru bazate pe motorul de randare RenderMan al Pixar, destinat producțiilor profesionale, pentru care a fost publicat un tutorial oficial cu resurse descărcabile. De asemenea, compania colaborează cu Yuemo Studio la realizarea de filme cu ajutorul IA, combinând medii captate din lumea reală cu conținut generat de IA.

Hesai a mai declarat că lucrează cu TRIC, un partener al Organizației Națiunilor Unite, la crearea unei opere de artă digitale captivante despre Cabana cu acoperiș de paie a lui Du Fu din Chengdu, fosta locuință a poetului din dinastia Tang. În cadrul parteneriatului cu Amap, reconstrucțiile Muzeului de Artă Gravity și ale Galeriei PIFO sunt deja disponibile în funcția Flying Street View din Amap. Hesai a declarat că platforma are aproape un miliard de utilizatori activi lunar, iar obiectivul pe termen lung al parteneriatului este să transforme navigarea, astfel încât utilizatorii să caute un produs în interiorul unui magazin, nu doar magazinul în sine.

Ecosistem deschis și module de acționare

Hesai dezvoltă Kosmo ca ecosistem deschis de inteligență spațială, oferind acces deschis la datele brute captate și la resurse 3D, cu integrări pentru NVIDIA Isaac Sim, Isaac Lab, Unreal Engine, RenderMan și Houdini. Compania a descris două modele de afaceri: soluții integrate de hardware și software pentru clienți din robotică, media și alte industrii și servicii de date care produc, la scară largă, date spațiale din lumea reală pentru dezvoltatorii de modele ale lumii și de IA fizică.

Hesai a declarat că livrările sale de LiDAR s-au dublat timp de nouă ani consecutivi și că deține o poziție de lider pe piața mondială a sistemelor ADAS pentru autoturisme și a robotaxiurilor, bază pe care își construiește următoarea etapă de creștere, axată pe date 3D despre lume și mișcarea roboților. Cofondatorul și CEO-ul Yifan „David” Li a descris motorul de date 3D despre lume și motorul complementar pentru mișcarea roboților drept al doilea motor de creștere al companiei. „În ultimul deceniu, am făcut posibil ca mașinile să vadă lumea”, a spus Li. „În următorul deceniu, vom face posibil ca roboții să o înțeleagă și să o schimbe.”

Pe lângă Kosmo, Hesai își extinde activitatea în domeniul sistemelor de acționare robotică. Modulele sale de acționare alimentează mâna dexteră Wave de la Sharpa, care, potrivit companiei, oferă o densitate de putere de trei ori mai mare decât produsele comparabile, într-un format cu 37% mai mic. Potrivit Hesai, mâna a fost inclusă în designul de referință al robotului umanoid NVIDIA Isaac GR00T și adoptată de instituții de cercetare precum UC Berkeley și Stanford. Compania a declarat că livrările cumulate ale modulelor sale de acționare au depășit 10.000 de unități până la sfârșitul celui de-al doilea trimestru din 2026 și că se așteaptă ca livrările să ajungă la șase cifre în 2027, pe măsură ce gama de produse se extinde de la module pentru mâini la articulații pentru întregul corp al robotului.