VoxelSensors і Qualcomm співпрацюють, щоб重新 визначити окуляри доповненої реальності

Доповнена реальність (AR) давно обіцяла майбутнє, де легкі окуляри безшовно накладають корисну цифрову інформацію на реальний світ. Але попри роки прогресу, більшість пристроїв AR сьогодні залишаються громіздкими, енергозатратними та ненадійними в реальних умовах. Для того, щоб AR вийшла за рамки нішевих випадків використання та увійшла в масову свідомість, технологія, що лежить в основі цих пристроїв, потребує серйозного стрибка вперед.

Саме це і намагається зробити VoxelSensors, бельгійський стартап глибоких технологій. Компанія оголосила про нове співробітництво з Qualcomm Technologies (QCOM ), щоб інтегрувати свою технологію Single Photon Active Event Sensor (SPAES™) і платформу PERCEPT у платформу Snapdragon AR2 Gen 1, флагманську платформу Qualcomm для окулярів доповненої реальності.

Мета ясна: менші, легші та більш інтелектуальні окуляри доповненої реальності, які споживачі можуть носити весь день — крок ближче до того, щоб зробити AR частиною повсякденного життя.

Чому сучасні окуляри доповненої реальності не відповідають очікуванням

Незважаючи на всі свої обіцянки, сучасні пристрої AR все ще не відповідають очікуванням. Тривалість роботи батареї — одна з найбільш постійних проблем; сенсори та процесори, які роблять можливим AR, споживають так багато енергії, що більшість пристроїв працюють лише кілька годин, перш ніж потрібно буде їх зарядити. Надійність також є бар’єром. Багато з традиційних підходів до сенсорики — від структурованого світла до стереокамер — не працюють у повсякденних умовах, наприклад, у яскравому сонячному світлі, на плоских поверхнях з малою текстурою або в тьмяних приміщеннях. Щоб компенсувати це, виробники часто додають додаткове обладнання, що призводить до більш громіздких пристроїв, які незручні для носіння протягом тривалого часу.

Результатом є категорія, яка вражає демонстраціями, але бореться за практичне застосування в повсякденному житті. Вирішення цих проблем і є тим, на що спрямовані зусилля VoxelSensors.

SPAES™: новий тип сенсора

Прорив VoxelSensors полягає в її технології SPAES™, сенсорній системі, побудованій на основі події-орієнтованої одиночної фотонної детекції. На відміну від традиційних камер, які захоплюють цілі кадри даних, SPAES виявляє лише ті зміни, які мають значення, обробляючи інформацію на рівні окремих фотонів. Цей підхід драматично зменшує кількість зібраних даних, одночасно покращуючи швидкість і ефективність системи.

Переваги значні. SPAES може забезпечити вимірювання глибини при десять раз меншому споживанні енергії, ніж сучасні методи, а також реагувати в сто раз швидше, ніж фрейм-орієнтовані системи. Можливо, навіть важливіше, вона продовжує працювати надійно як у яскравому зовнішньому світлі, так і в умовах низького освітлення, де інші системи зазвичай не працюють. Це робить можливим уявлення окулярів доповненої реальності, які є реактивними, точними та здатними працювати протягом усього дня на одному заряді.

Від сирої інформації до реального розуміння

Звичайно, захоплення сирої інформації — це лише половина завдання. Щоб бути корисним, пристрої AR повинні розуміти контекст того, що робить користувач. Саме тут вступає в дію платформа PERCEPT від VoxelSensors. PERCEPT — це шар аналізу, керований штучним інтелектом, який інтерпретує світ з точки зору користувача. Він може визначити не тільки те, де знаходиться користувач, але й те, на що він звертає увагу, як він рухається через своє середовище та як він взаємодіє з об’єктами навколо нього.

У центрі PERCEPT лежить механізм, який VoxelSensors називає Triage. Ця система пріоритезує актуальну інформацію та фільтрує шум, забезпечуючи те, що пристрій зосереджується лише на тому, що найважливіше для користувача в даний момент. Виключаючи нерелевантну інформацію, PERCEPT зменшує енергоспоживання, захищає приватність користувача та створює чисті сигнали, які можуть ефективніше тренувати моделі штучного інтелекту. Комбінація SPAES і PERCEPT призводить до того, що VoxelSensors називає Фізичним ІІ — штучним інтелектом, коренем якого є людська перспектива. Замість простого відображення цифрових наложень окуляри доповненої реальності можуть почати передбачати потреби користувача, пропонуючи допомогу, яка відчувається більш особистою та адаптивною.

Роль Qualcomm: Snapdragon AR2 Gen 1

Хоча VoxelSensors приносить нові інновації в сфері сенсорики, Qualcomm забезпечує процесорну основу для масштабованого застосування цих інновацій. Платформа Snapdragon AR2 Gen 1 від Qualcomm спеціально розроблена для пристроїв AR, з прискоренням штучного інтелекту, ефективним обчисленням та безшовною підключенням. Інтегруючи SPAES і PERCEPT у Snapdragon, VoxelSensors забезпечує те, що її технологія безшовно інтегрується з платформою, на якій вже залежать багато сучасних виробників пристроїв AR.

Це співробітництво створює повний ланцюжок від сенсорики до обчислень: SPAES захоплює світ з безпрецедентною ефективністю, PERCEPT інтерпретує дані в реальному часі, а Snapdragon виконує обробку, необхідну для перекладу цього в руйнівні досвіди доповненої реальності. Згідно з словами Зіада Асгара з Qualcomm, саме це потрібно для реалізації бачення “малих, легких окулярів доповненої реальності, які споживачі можуть носити весь день”.

Компанії планують зробити оптимізоване рішення доступним для вибраних партнерів до грудня 2025 року, що стане важливим кроком на шляху до комерційного впровадження.

Зміна того, що можуть робити окуляри доповненої реальності

Те, що робить це співробітництво видатним, полягає в тому, як воно змінює функцію окулярів доповненої реальності з простих дисплейних пристроїв до інтелектуальних компаньйонів. З SPAES, який обробляє多задачі — від вимірювання глибини та відстеження очей до мікродвигунної зйомки та відстеження контролера — окуляри більше не потребують різноманітних сенсорів. Все закріплено за точкою зору користувача, що зменшує складність конструкції та покращує точність і ефективність.

Для виробників пристроїв це означає менше компонентів для інтеграції, простіші процеси виробництва та, врешті-решт, менші, легші окуляри, які споживачі будуть фактично бажати носити. Для користувачів це означає досвід доповненої реальності, який відчувається більш гладким, реактивним та більш узгодженим з їхнім реальним поведінкою.

У бік повсякденної доповненої реальності

Потенційні застосування цієї технології розширюються далеко за межі ігор чи розваг. У сфері охорони здоров’я окуляри доповненої реальності можуть допомогти хірургам, забезпечуючи надійне контекстне усвідомлення під час процедур. У освіті вони можуть забезпечити персоналізовані навчальні досвіди, які адаптуються до того, на що студенти звертають увагу. Для працівників у галузях, таких як логістика чи виробництво, вони можуть забезпечити безручне керівництво в складних середовищах. Навіть для звичайних споживачів обіцянка є привабливою: невидимий особистий асистент, який розуміє не тільки голосові команди, але й контекст того, що робить і бачить носій.

VoxelSensors описує цей перехід як рух “від пікселів до даних, і від даних до сприйняття”. Замість простого проєктування цифрової інформації окуляри доповненої реальності починають інтерпретувати та реагувати на фізичний і людський контекст в реальному часі.

Стартап глибоких технологій з перевіреними коренями

Хоча заснована у 2020 році, VoxelSensors будує на глибокій спадщині інновацій. Її засновники раніше працювали в SoftKinetic, компанії часової детекції, яку придбала Sony, а у 2024 році компанія придбала інтелектуальну власність EyeWay Vision, ще більше зміцнивши свій технологічний портфель.

VoxelSensors також позиціонує себе в рамках ширшої політики та інноваційної екосистеми. Як засновник партнерства з Європейським Союзом щодо віртуальних світів, компанія допомагає формувати стратегію Європи щодо віртуальних та доповнених технологій. Її узгодженість з актом ЄС про штучний інтелект та стратегією Web 4.0 підкреслює її зобов’язання щодо приватності, інклюзивності та відповідальної інновації — якостей, які можуть виявитися важливими, коли прийняття AR зростає, а практики обробки даних піддаються все більшій увазі.

Погляд у майбутнє

Наступні роки визначать, чи зможуть окуляри доповненої реальності перейти від футуристичних прототипів до真正их практичних споживчих пристроїв. Дорожня карта VoxelSensors підкреслює подальшу мініатюризацію сенсорів, глибшу інтеграцію з платформами Snapdragon та розширені можливості штучного інтелекту на краю мережі, щоб забезпечити реактивність та приватність на пристрої.

Якщо успішне, співробітництво між VoxelSensors і Qualcomm може ознаменувати початок нової ери в AR: однієї, де окуляри не тільки тонкі та ефективні, але й достатньо інтелектуальні, щоб зрозуміти світ з точки зору носія. Ця зміна могла б перетворити AR з технології флеш-демонстрацій на інструмент, так звичайний і необхідний, як смартфон.