Hesai lanza Kosmo para convertir escaneos del mundo real en datos de entrenamiento para robots

Hesai Group lanzó Kosmo el 14 de octubre de 2026: un motor de datos 3D del mundo que combina su cámara espacial Kosmo One con la plataforma en la nube Kosmo World para convertir entornos físicos en espacios digitales 3D de alta fidelidad, destinados al entrenamiento de robots, al desarrollo de modelos del mundo y a la creación de contenido inmersivo.

Durante el evento de lanzamiento, la empresa también anunció alianzas estratégicas con las compañías de IA incorporada Galbot y Dexmal, y mostró aplicaciones desarrolladas con el motor de renderizado RenderMan de Pixar y la plataforma china de mapas Amap, para los sectores de la robótica, la cinematografía y los servicios de localización.

Shaoqing Xiang, cofundador y director de tecnología de Hesai, afirmó que la IA física necesita datos del mundo real que sean precisos, asequibles y estén disponibles a gran escala, y que satisfacer simultáneamente los tres requisitos ha sido un problema persistente. «Kosmo está diseñado para superar ese reto y facilitar que los desarrolladores de IA y los creadores conviertan entornos reales en datos con los que puedan entrenar y en recursos con los que puedan crear», afirmó.

Hardware de captura Kosmo One

Kosmo One es una cámara espacial con IA de ultraalta definición 8K que combina lidar de alta resolución, un sensor de imagen de una pulgada y una unidad de medición inercial de alta precisión. Además, registra geometría, color, textura y posición de la cámara con sincronización de nivel de microsegundos. Hesai la describe como la primera cámara espacial con IA del mundo que integra un sistema de imagen 8K; en una nota al pie, la empresa aclara que esta designación se basa en la información de productos disponible públicamente hasta octubre de 2026. La cifra de 8K se refiere a la resolución máxima de captura; la resolución máxima que pueden exportar los usuarios es 6K.

Según Hesai, la reconstrucción mediante Gaussian Splatting 3D de la cámara alcanza una precisión geométrica de nivel milimétrico y reproduce materiales, iluminación y sombras. La cámara permite iniciar el escaneo al encenderla, ofrece orientación inteligente y permite reanudar un escaneo con un solo clic. La empresa afirma que una sola persona puede escanear un espacio interior típico de 100 metros cuadrados en aproximadamente 15 minutos. Después, Kosmo World procesa los datos capturados y los convierte en modelos 3D a una velocidad de hasta aproximadamente cinco veces la de productos comparables, según Hesai, que señala que los resultados reales varían en función de la escena, el volumen de datos y los ajustes de los parámetros.

Kosmo World y el despliegue en Dairy Queen

Kosmo World permite crear y gestionar contenido 3D en una única plataforma, impulsada por lo que Hesai denomina su Kosmo Spatial Core. Cada reconstrucción genera conjuntamente datos de Gaussian Splatting 3D, mallas y profundidad en una escena coherente. La IA generativa completa las zonas que el escáner no capturó y reconstruye materiales y texturas, mientras que la segmentación semántica identifica objetos individuales. También es posible adaptar las vistas a las características de la cámara de un robot, lo que, según Hesai, ayuda a reducir la brecha entre la simulación y el funcionamiento en el mundo real.

Como ejemplo práctico, Hesai señaló un despliegue en una heladería Dairy Queen, donde, según la empresa, antes un equipo profesional necesitaba aproximadamente 300 horas de modelado manual para crear un entorno de entrenamiento 3D. Con Kosmo, el escaneo y la reconstrucción llevaron 15 minutos. En ese despliegue, la tasa de éxito del robot Sharpa al realizar tareas alcanzó el 99 % y su tasa de fallos cayó a una décima parte del nivel anterior, lo que permitió que el robot empezara a funcionar en una tienda real, según Hesai.

Modelos del mundo, cine y cartografía

Para desarrollar modelos del mundo, Hesai afirmó que las escenas geométricamente precisas de Kosmo ofrecen posiciones precisas de la cámara, información de profundidad y vistas coherentes desde múltiples ángulos, que sirven como referencia del mundo real para construir entornos virtuales. Un único espacio capturado puede generar automáticamente más de 10.000 trayectorias de entrenamiento, lo que proporciona a los desarrolladores más de 100 veces más datos de entrenamiento de alta calidad por el mismo coste; Hesai define esta comparación en relación con el coste de recopilar una trayectoria de robot de alta calidad en el mundo real.

Para la producción cinematográfica, la empresa calcula que escanear, reconstruir y editar un paisaje urbano europeo de 10.000 metros cuadrados lleva una semana con Kosmo, frente a los aproximadamente dos meses que se tardaría en construir el lugar como decorado físico, y afirma que los costes totales pueden reducirse hasta un 80 %. Para una escena interior de 200 metros cuadrados, Hesai calcula que el trabajo requiere aproximadamente dos jornadas-persona con Kosmo, frente a unas 14 jornadas-persona con el modelado tradicional por computadora. Hesai afirmó que varias empresas de cine y televisión ya utilizan Kosmo en flujos de trabajo basados en el motor de renderizado RenderMan, de nivel profesional, de Pixar, que ha publicado un tutorial oficial con recursos descargables. Además, la empresa colabora con Yuemo Studio en la producción cinematográfica asistida por IA, que combina entornos reales capturados con contenido generado por IA.

Hesai también afirmó que trabaja con TRIC, socio de las Naciones Unidas, para crear una obra de arte digital inmersiva de Du Fu Thatched Cottage, en Chengdu, antigua residencia del poeta de la dinastía Tang. En el marco de la alianza con Amap, las reconstrucciones del Gravity Art Museum y de PIFO Gallery ya están disponibles en la función Flying Street View de Amap. Hesai afirmó que la plataforma llega a casi mil millones de usuarios activos mensuales y que el objetivo a largo plazo de la alianza es pasar de una navegación que permite encontrar una tienda a otra que permita encontrar un producto dentro de ella.

Ecosistema abierto y módulos de accionamiento

Hesai está desarrollando Kosmo como un ecosistema abierto de inteligencia espacial, que ofrece acceso abierto a datos de captura sin procesar y recursos 3D, con integraciones con NVIDIA Isaac Sim, Isaac Lab, Unreal Engine, RenderMan y Houdini. La empresa describió dos modelos de negocio: soluciones integradas de hardware y software para clientes de los sectores de la robótica, los medios y otras industrias, y servicios de datos que producen datos espaciales del mundo real a gran escala para desarrolladores de modelos del mundo y de IA física.

Hesai afirmó que sus entregas de lidar se han duplicado durante nueve años consecutivos y que ocupa una posición de liderazgo en el mercado mundial de sistemas avanzados de asistencia al conductor (ADAS) para vehículos de pasajeros y de robotaxis, una base sobre la que está construyendo su próxima etapa de crecimiento en torno a los datos tridimensionales del mundo y el movimiento robótico. El cofundador y director ejecutivo, Yifan “David” Li, describió el motor de datos tridimensionales del mundo y un motor complementario de movimiento robótico como el segundo motor de crecimiento de la empresa. «Durante la última década, hemos permitido que las máquinas vean el mundo», afirmó Li. «Durante la próxima década, permitiremos que los robots lo comprendan y lo transformen».

Junto con Kosmo, Hesai está expandiendo su negocio de accionamiento robótico. Sus módulos de accionamiento impulsan la mano diestra Wave de Sharpa, que, según la empresa, ofrece una densidad de potencia tres veces mayor que la de productos comparables en un conjunto un 37 % más pequeño. Según Hesai, la mano se ha incorporado al diseño de referencia del robot humanoide Isaac GR00T de NVIDIA y ha sido adoptada por instituciones de investigación como UC Berkeley y Stanford. La empresa afirmó que las entregas acumuladas de sus módulos de accionamiento superaron las 10.000 unidades al cierre del segundo trimestre de 2026 y que espera alcanzar cifras de seis dígitos en los envíos en 2027, a medida que la línea de productos se amplía desde los módulos para manos hasta las articulaciones en todo el cuerpo del robot.