Hesai представляє Kosmo, щоб перетворювати сканування реального світу на дані для навчання роботів

14 жовтня 2026 року Hesai Group представила Kosmo — рушій тривимірних даних про світ, який поєднує просторову камеру Kosmo One з хмарною платформою Kosmo World і перетворює фізичне середовище на високоточні тривимірні цифрові простори для навчання роботів, розроблення моделей світу та створення імерсивного контенту.

Під час презентації компанія також оголосила про стратегічне партнерство з компаніями Galbot і Dexmal, що працюють у сфері втіленого ШІ, та продемонструвала застосунки, розроблені з використанням рендерера RenderMan від Pixar і китайської картографічної платформи Amap. Вони охоплюють робототехніку, кіновиробництво та геолокаційні сервіси.

Співзасновник і технічний директор Hesai Шаоцін Сян заявив, що фізичному ШІ потрібні точні, доступні за ціною та наявні у великих обсягах дані з реального світу, а одночасно забезпечити всі три вимоги досі було складно. «Kosmo покликана подолати цю проблему: завдяки їй розробникам ШІ та творцям буде простіше перетворювати реальне середовище на дані для навчання моделей і ресурси для створення контенту», — сказав він.

Обладнання для знімання Kosmo One

Kosmo One — це просторова камера зі штучним інтелектом і надвисокою роздільною здатністю 8K, що поєднує лідар високої роздільної здатності, дюймовий датчик зображення та високоточний інерційний вимірювальний блок. Вона записує геометрію, колір, текстуру й положення камери із синхронізацією на рівні мікросекунд. Hesai називає її першою у світі просторовою камерою зі штучним інтелектом та інтегрованою системою знімання 8K; у примітці до цього визначення компанія зазначає, що воно ґрунтується на загальнодоступній інформації про продукти станом на жовтень 2026 року. Показник 8K стосується максимальної роздільної здатності знімання; максимальна роздільна здатність експорту для користувачів становить 6K.

За даними Hesai, камера відтворює матеріали, освітлення й тіні, а точність геометричної реконструкції методом 3D-гаусового сплатування сягає міліметрового рівня. Камера дає змогу почати сканування одразу після ввімкнення, пропонує інтелектуальні підказки та дозволяє відновити сканування одним натисканням кнопки. За словами компанії, один оператор може відсканувати типове приміщення площею 100 квадратних метрів приблизно за 15 хвилин. Потім Kosmo World обробляє отримані дані та створює тривимірні моделі зі швидкістю, що, за твердженням Hesai, сягає приблизно п’ятикратної порівняно з аналогічними продуктами. Компанія зауважує, що фактичні результати залежать від сцени, обсягу даних і налаштувань параметрів.

Kosmo World і впровадження в закладі Dairy Queen

Kosmo World забезпечує створення й керування тривимірним контентом на єдиній платформі, що працює на основі Kosmo Spatial Core — так Hesai називає своє ядро просторових даних. Одна реконструкція одночасно формує дані 3D-гаусового сплатування, полігональну сітку та дані про глибину в межах цілісної сцени. Генеративний ШІ заповнює ділянки, які сканер не охопив, і відтворює матеріали та текстури, а семантична сегментація визначає окремі об’єкти. Вигляд також можна адаптувати до характеристик камери робота, що, за словами Hesai, допомагає скоротити розрив між симуляцією та роботою в реальному світі.

Як приклад практичного застосування Hesai навела впровадження технології в закладі морозива Dairy Queen. За словами компанії, раніше професійній команді потрібно було приблизно 300 годин ручного моделювання, щоб створити тривимірне середовище для навчання. З Kosmo сканування та реконструкція тривали 15 хвилин. У цьому впровадженні рівень успішного виконання завдань роботом Sharpa сягнув 99%, а рівень невдач знизився до однієї десятої від попереднього показника. За даними Hesai, завдяки цьому робот зміг почати працювати в реальному закладі.

Моделі світу, кіно та картографія

За словами Hesai, для розроблення моделей світу геометрично точні сцени Kosmo забезпечують точне визначення положення камер, інформацію про глибину та узгоджені ракурси з різних боків, слугуючи реальним орієнтиром для побудови віртуальних середовищ. З одного відсканованого простору можна автоматично згенерувати понад 10 000 навчальних траєкторій, завдяки чому розробники отримують більш ніж у 100 разів більше високоякісних навчальних даних за ті самі кошти. Hesai порівнює ці витрати з вартістю збирання однієї високоякісної траєкторії робота в реальному світі.

За оцінкою компанії, сканування, реконструкція та редагування європейської вуличної сцени площею 10 000 квадратних метрів за допомогою Kosmo займає один тиждень, тоді як створення цієї локації як фізичної декорації потребує приблизно двох місяців. Загальні витрати, за її словами, можуть знизитися на величину до 80%. Для внутрішньої сцени площею 200 квадратних метрів Hesai оцінює обсяг роботи з Kosmo приблизно у два людино-дні, порівнюючи його з приблизно 14 людино-днями традиційного моделювання комп’ютерної графіки. За словами Hesai, кіно- й телевізійні компанії вже використовують Kosmo у робочих процесах на основі виробничого рендерера RenderMan від Pixar, для якого опубліковано офіційний навчальний посібник із ресурсами для завантаження. Крім того, компанія співпрацює з Yuemo Studio над кіновиробництвом за допомогою ШІ, поєднуючи зняте реальне середовище з контентом, створеним штучним інтелектом.

Hesai також повідомила, що співпрацює з TRIC, партнером Організації Об’єднаних Націй, над створенням імерсивного цифрового твору про Солом’яну хатину Ду Фу в Ченду — колишню домівку поета часів династії Тан. У межах партнерства з Amap реконструкції Музею мистецтв Gravity та галереї PIFO вже доступні у функції Flying Street View на платформі Amap. За словами Hesai, щомісяця платформою користується майже один мільярд активних користувачів, а довгострокова мета партнерства — змінити навігацію: від пошуку магазину до пошуку потрібного товару всередині нього.

Відкрита екосистема та модулі приводів

Hesai розробляє Kosmo як відкриту екосистему просторового інтелекту, забезпечуючи відкритий доступ до необроблених даних зйомки та 3D-ресурсів, а також інтеграцію з NVIDIA Isaac Sim, Isaac Lab, Unreal Engine, RenderMan і Houdini. Компанія описала дві бізнес-моделі: комплексні апаратні й програмні рішення для клієнтів у робототехніці, медіа та інших галузях, а також послуги з обробки даних, що дають змогу масштабно створювати дані про реальний світ для розробників моделей світу та фізичного ШІ.

За словами Hesai, поставки її лідарів подвоювалися дев’ять років поспіль, а компанія посідає провідні позиції на світовому ринку систем ADAS для легкових автомобілів і роботаксі. Це стало основою для наступного етапу зростання компанії, зосередженого на даних про 3D-світ і роботизованому русі. Співзасновник і генеральний директор Yifan “David” Li назвав рушієм другого етапу зростання компанії механізм для роботи з даними про 3D-світ і пов’язаний із ним механізм роботизованого руху. «Протягом останнього десятиліття ми допомагали машинам бачити світ, — сказав Li. — У наступному десятилітті ми допоможемо роботам розуміти його й змінювати»

Паралельно з Kosmo Hesai розвиває напрям роботизованих приводів. Її модулі приводів використовуються у спритній роботизованій руці Wave від Sharpa, яка, за словами компанії, має втричі вищу щільність потужності, ніж аналогічні вироби, і на 37% менший корпус. За даними Hesai, цю руку включили до референсного проєкту гуманоїдного робота NVIDIA Isaac GR00T, а також її використовують дослідницькі установи, зокрема UC Berkeley і Stanford. Компанія повідомила, що до кінця другого кварталу 2026 року сукупні поставки її модулів приводів перевищили 10 000 одиниць, а у 2027 році, у міру розширення лінійки від модулів для кистей до приводів у суглобах по всьому тілу робота, очікує на шестизначну кількість відвантажень.