Hesai lancerer Kosmo, der omdanner scanninger af virkelige omgivelser til træningsdata for robotter

Hesai Group lancerede Kosmo den 14. oktober 2026. Det er en 3D-motor til verdensdata, der kombinerer virksomhedens rumlige kamera Kosmo One med cloudplatformen Kosmo World og omdanner fysiske omgivelser til detaljerede digitale 3D-rum, som bruges til træning af robotter, udvikling af verdensmodeller og skabelse af medrivende indhold.

Ved lanceringsarrangementet annoncerede virksomheden også strategiske partnerskaber med virksomhederne inden for kropsliggjort AI, Galbot og Dexmal, og demonstrerede anvendelser udviklet med Pixars renderingsværktøj RenderMan og den kinesiske kortplatform Amap inden for robotteknologi, filmskabelse og lokationstjenester.

Shaoqing Xiang, medstifter og teknologidirektør i Hesai, sagde, at fysisk AI kræver data fra virkelige omgivelser, som er nøjagtige, økonomisk overkommelige og tilgængelige i stor skala, og at det længe har været en udfordring at opfylde alle tre krav på én gang. »Kosmo er udviklet til at overvinde denne udfordring og gøre det lettere for AI-udviklere og kreative at omdanne virkelige omgivelser til data, de kan træne på, og ressourcer, de kan bygge videre på,« sagde han.

Optageudstyr i Kosmo One

Kosmo One er et AI-kamera til rumlig registrering i ultrahøj opløsning på 8K, som kombinerer lidar i høj opløsning, en billedsensor på én tomme og en inertimåleenhed med høj præcision. Det registrerer geometri, farve, tekstur og kameraets position med synkronisering på mikrosekundniveau. Hesai beskriver det som verdens første AI-kamera til rumlig registrering med et integreret 8K-billedsystem; i en fodnote præciserer virksomheden, at betegnelsen bygger på offentligt tilgængelige produktoplysninger pr. oktober 2026. 8K angiver den maksimale optageopløsning; den maksimale opløsning, som brugerne kan eksportere, er 6K.

Ifølge Hesai opnår kameraets rekonstruktion med 3D Gaussian Splatting geometrisk nøjagtighed på millimeterniveau og gengiver materialer, belysning og skygger. Kameraet tilbyder øjeblikkelig scanning, når det tændes, intelligent vejledning og mulighed for at genoptage en scanning med ét klik. Virksomheden siger, at én operatør kan scanne et typisk indendørs område på 100 kvadratmeter på cirka 15 minutter. Derefter behandler Kosmo World de indsamlede data til 3D-modeller med op til cirka fem gange så høj hastighed som sammenlignelige produkter, oplyser Hesai, som samtidig understreger, at de faktiske resultater varierer afhængigt af scenen, datamængden og parameterindstillingerne.

Kosmo World og brugen hos Dairy Queen

Kosmo World håndterer oprettelse og administration af 3D-indhold på én platform, der drives af det, Hesai kalder Kosmo Spatial Core. Én rekonstruktion genererer 3D Gaussian Splatting, mesh- og dybdedata samlet i én konsistent scene. Generativ AI udfylder områder, som scanneren ikke har registreret, og rekonstruerer materialer og teksturer, mens semantisk segmentering identificerer de enkelte objekter. Visninger kan også tilpasses en robots kameraspecifikationer, hvilket ifølge Hesai hjælper med at mindske afstanden mellem simulering og drift i virkelige omgivelser.

Som et praktisk eksempel henviste Hesai til en løsning i en Dairy Queen-isbutik, hvor et professionelt team tidligere skulle bruge cirka 300 timers manuel modellering for at opbygge et 3D-træningsmiljø, oplyste virksomheden. Med Kosmo tog scanning og rekonstruktion 15 minutter. I denne løsning nåede Sharpa-robotten en succesrate på 99 % for sine opgaver, mens fejlprocenten faldt til en tiendedel af det tidligere niveau. Ifølge Hesai gjorde det robotten i stand til at begynde at arbejde i en rigtig butik.

Verdensmodeller, film og kortlægning

Til udvikling af verdensmodeller oplyste Hesai, at Kosmos geometrisk nøjagtige scener leverer præcise kamerapositioner, dybdeinformation og konsistente visninger fra flere vinkler som reference fra den virkelige verden, når virtuelle miljøer skal opbygges. Ét indfanget område kan give mere end 10.000 automatisk genererede træningsforløb, så udviklere får over 100 gange så mange træningsdata af høj kvalitet til samme pris. Hesai definerer sammenligningen ud fra prisen på at indsamle ét træningsforløb af høj kvalitet for en robot i virkelige omgivelser.

Til filmproduktion anslår virksomheden, at det med Kosmo tager én uge at scanne, rekonstruere og redigere et europæisk gadebillede på 10.000 kvadratmeter, sammenlignet med cirka to måneder på at bygge stedet som et fysisk filmsæt. Virksomheden siger, at de samlede omkostninger kan falde med op til 80 %. For en indendørsscene på 200 kvadratmeter anslår Hesai arbejdsindsatsen til cirka to mandedage med Kosmo mod omkring 14 mandedage med traditionel CG-modellering. Hesai oplyste, at film- og tv-selskaber allerede bruger Kosmo i arbejdsgange baseret på Pixars RenderMan-renderingsværktøj til professionel produktion, som har udgivet en officiel vejledning med ressourcer, der kan downloades. Virksomheden samarbejder desuden med Yuemo Studio om AI-assisteret filmskabelse, hvor optagelser af virkelige omgivelser kombineres med AI-genereret indhold.

Hesai oplyste også, at virksomheden samarbejder med TRIC, en partnerorganisation under FN, om at skabe et medrivende digitalt kunstværk af Du Fu Thatched Cottage i Chengdu, der var hjem for digteren fra Tang-dynastiet. Som led i partnerskabet med Amap er rekonstruktioner af Gravity Art Museum og PIFO Gallery allerede tilgængelige i Amaps Flying Street View-funktion. Hesai oplyste, at platformen når ud til næsten en milliard månedligt aktive brugere, og at partnerskabets langsigtede mål er at ændre navigationen fra at hjælpe brugere med at finde en butik til at hjælpe dem med at finde et produkt inde i butikken.

Åbent økosystem og aktuationsmoduler

Hesai udvikler Kosmo som et åbent økosystem for rumlig intelligens med åben adgang til rå optagedata og 3D-aktiver samt integrationer med NVIDIA Isaac Sim, Isaac Lab, Unreal Engine, RenderMan og Houdini. Virksomheden beskrev to forretningsmodeller: integrerede hardware- og softwareløsninger til kunder inden for robotteknologi, medier og andre brancher samt datatjenester, der producerer rumlige data fra den virkelige verden i stor skala til udviklere af verdensmodeller og fysisk AI.

Hesai oplyste, at virksomhedens lidarleverancer er blevet fordoblet ni år i træk, og at den har en førende global markedsposition inden for ADAS til personbiler og robotaxier. Det er grundlaget for den næste vækstfase, som virksomheden bygger op omkring 3D-data fra verden og robotbevægelse. Medstifter og administrerende direktør Yifan “David” Li beskrev 3D-datamotoren og en tilhørende motor til robotbevægelse som virksomhedens anden vækstdriver. “I løbet af det seneste årti har vi gjort det muligt for maskiner at se verden,” sagde Li. “I løbet af det næste årti vil vi gøre det muligt for robotter at forstå og ændre den.”

Sideløbende med Kosmo udvider Hesai sin forretning inden for robotaktuering. Virksomhedens aktuatormoduler driver Sharpa Waves fingerfærdige hånd, som ifølge virksomheden leverer tre gange så høj effekttæthed som sammenlignelige produkter i en pakke, der er 37 % mindre. Ifølge Hesai er hånden blevet indarbejdet i NVIDIA Isaac GR00T’s referencedesign for humanoide robotter og taget i brug af forskningsinstitutioner, herunder UC Berkeley og Stanford. Virksomheden oplyste, at de samlede leverancer af dens aktuatormoduler oversteg 10.000 enheder ved udgangen af andet kvartal 2026, og at den forventer, at leverancerne når op på seks cifre i 2027, efterhånden som produktlinjen udvides fra håndmoduler til led i hele robottens krop.