Hesai lança Kosmo para transformar digitalizações do mundo real em dados de treinamento para robôs

Em 14 de outubro de 2026, o Hesai Group lançou Kosmo, um motor de dados do mundo 3D que combina sua câmera espacial Kosmo One com a plataforma em nuvem Kosmo World. A solução transforma ambientes físicos em espaços digitais 3D de alta fidelidade, usados para treinar robôs, desenvolver modelos de mundo e criar conteúdo imersivo.

No evento de lançamento, a empresa também anunciou parcerias estratégicas com as empresas de IA incorporada Galbot e Dexmal e apresentou aplicações desenvolvidas com o mecanismo de renderização RenderMan, da Pixar, e a plataforma chinesa de mapas Amap, com aplicações em robótica, cinema e serviços de localização.

Shaoqing Xiang, cofundador e diretor de tecnologia da Hesai, afirmou que a IA física precisa de dados do mundo real que sejam precisos, acessíveis e disponíveis em grande escala, e que atender aos três requisitos ao mesmo tempo tem sido um problema persistente. “A Kosmo foi projetada para superar esse desafio, facilitando para desenvolvedores de IA e criadores transformar ambientes reais em dados para treinamento e em recursos para suas criações”, disse ele.

Hardware de captura Kosmo One

A Kosmo One é uma câmera espacial com IA de ultra-alta definição 8K que combina lidar de alta resolução, um sensor de imagem de uma polegada e uma unidade de medição inercial de alta precisão. Ela registra geometria, cor, textura e posição da câmera com sincronização na escala de microssegundos. A Hesai a descreve como a primeira câmera espacial com IA do mundo a integrar um sistema de imagem 8K — uma classificação que, segundo uma nota de rodapé da empresa, se baseia nas informações de produtos disponíveis publicamente em outubro de 2026. A resolução 8K refere-se à resolução máxima de captura; a resolução máxima que os usuários podem exportar é 6K.

Segundo a Hesai, a reconstrução por Gaussian Splatting 3D da câmera alcança precisão geométrica na escala de milímetros e reproduz materiais, iluminação e sombras. A câmera oferece digitalização instantânea ao ser ligada, orientação inteligente e retomada da digitalização com um único toque. A empresa afirma que um único operador consegue digitalizar um espaço interno típico de 100 metros quadrados em aproximadamente 15 minutos. Em seguida, o Kosmo World processa os dados capturados e os transforma em modelos 3D a até aproximadamente cinco vezes a velocidade de produtos comparáveis, segundo a Hesai, que ressalva que os resultados reais variam conforme a cena, o volume de dados e as configurações dos parâmetros.

Kosmo World e a implantação na Dairy Queen

O Kosmo World reúne, em uma única plataforma, a criação e o gerenciamento de conteúdo 3D, com tecnologia do que a Hesai chama de Kosmo Spatial Core. Uma única reconstrução gera, em conjunto e dentro de uma cena coerente, dados de Gaussian Splatting 3D, malha e profundidade. A IA generativa preenche as áreas que o scanner não capturou e reconstrói materiais e texturas, enquanto a segmentação semântica identifica objetos individuais. Também é possível adaptar as visualizações às características da câmera de um robô, o que, segundo a Hesai, ajuda a reduzir a distância entre a simulação e a operação no mundo real.

Como exemplo prático, a Hesai mencionou uma implantação em uma sorveteria da Dairy Queen, onde, segundo a empresa, uma equipe profissional precisava antes de aproximadamente 300 horas de modelagem manual para construir um ambiente de treinamento 3D. Com a Kosmo, a digitalização e a reconstrução levaram 15 minutos. Nessa implantação, a taxa de sucesso do robô Sharpa nas tarefas chegou a 99%, e sua taxa de falhas caiu para um décimo do nível anterior, permitindo que o robô começasse a operar em uma loja de verdade, segundo a Hesai.

Modelos de mundo, cinema e mapas

Para o desenvolvimento de modelos de mundo, a Hesai afirmou que as cenas geometricamente precisas da Kosmo fornecem posições exatas da câmera, informações de profundidade e visualizações coerentes de vários ângulos, que servem como referência do mundo real para a construção de ambientes virtuais. Um único espaço capturado pode gerar mais de 10.000 trajetórias de treinamento automaticamente, oferecendo aos desenvolvedores mais de 100 vezes mais dados de treinamento de alta qualidade pelo mesmo custo — comparação que a Hesai define em relação ao custo de coletar uma trajetória de robô de alta qualidade no mundo real.

Para produções cinematográficas, a empresa estima que, com a Kosmo, digitalizar, reconstruir e editar uma paisagem urbana europeia de 10.000 metros quadrados leva uma semana, em comparação com aproximadamente dois meses para construir o local como cenário físico, e afirma que os custos totais podem cair até 80%. Para uma cena interna de 200 metros quadrados, a Hesai estima o trabalho em aproximadamente dois dias-pessoa com a Kosmo, contra cerca de 14 dias-pessoa na modelagem tradicional em computação gráfica. A Hesai afirmou que empresas de cinema e televisão já usam a Kosmo em fluxos de trabalho baseados no mecanismo de renderização RenderMan, da Pixar, voltado à produção profissional, que lançou um tutorial oficial com recursos para download. A empresa também está colaborando com a Yuemo Studio em produções cinematográficas com assistência de IA, combinando ambientes reais capturados com conteúdo gerado por IA.

A Hesai também informou que está trabalhando com a TRIC, parceira das Nações Unidas, para criar uma obra de arte digital imersiva da Casa de Palha de Du Fu, em Chengdu, antiga residência do poeta da dinastia Tang. No âmbito da parceria com a Amap, reconstruções do Gravity Art Museum e da PIFO Gallery já estão disponíveis no recurso Flying Street View da Amap. A Hesai afirmou que a plataforma alcança quase um bilhão de usuários ativos mensais e que o objetivo de longo prazo da parceria é transformar a navegação, que hoje ajuda a encontrar uma loja, em uma ferramenta para localizar um produto dentro dela.

Ecossistema aberto e módulos de atuação

A Hesai está desenvolvendo o Kosmo como um ecossistema aberto de inteligência espacial, oferecendo acesso aberto a dados brutos de captura e ativos 3D, com integrações com NVIDIA Isaac Sim, Isaac Lab, Unreal Engine, RenderMan e Houdini. A empresa descreveu dois modelos de negócio: soluções integradas de hardware e software para clientes dos setores de robótica, mídia e outras indústrias; e serviços de dados que produzem dados espaciais do mundo real em grande escala para desenvolvedores de modelos de mundo e de IA física.

A Hesai afirmou que suas entregas de lidar dobraram por nove anos consecutivos e que ocupa uma posição de liderança no mercado global de ADAS para veículos de passageiros e de robotáxis. Essa é a base sobre a qual está construindo sua próxima fase de crescimento, centrada em dados tridimensionais do mundo e movimento robótico. O cofundador e CEO Yifan “David” Li descreveu o mecanismo de dados tridimensionais do mundo e um mecanismo complementar de movimento robótico como o segundo motor de crescimento da empresa. “Na última década, permitimos que as máquinas enxergassem o mundo”, disse Li. “Na próxima década, permitiremos que os robôs o compreendam e transformem.”

Paralelamente ao Kosmo, a Hesai está expandindo seus negócios de atuação robótica. Seus módulos de atuação alimentam a mão hábil Wave, da Sharpa, que, segundo a empresa, oferece três vezes mais densidade de potência do que produtos comparáveis em um formato 37% menor. De acordo com a Hesai, a mão foi incorporada ao projeto de referência do robô humanoide Isaac GR00T, da NVIDIA, e adotada por instituições de pesquisa como UC Berkeley e Stanford. A empresa afirmou que as entregas acumuladas de seus módulos de atuação ultrapassaram 10.000 unidades até o fim do segundo trimestre de 2026 e que espera que os embarques cheguem à casa das centenas de milhares em 2027, à medida que a linha de produtos se expande de módulos para mãos a articulações distribuídas por todo o corpo do robô.