Matteo Shapira, spoluzakladatel a CXO XTEND – Interview Series

Matteo Shapira je spoluzakladatel a CXO XTEND, revoluční telepresence platformy, která umožňuje lidem virtuálně rozšířit se do akce prostřednictvím modelu lidsko-strojového rozhraní. Tento model kombinuje nejlepší vlastnosti lidí a strojů pro provádění disruptivních, složitých úkolů.

Můžete začít vysvětlováním, jak se Xtended Reality (XR) liší nebo slučuje virtuální, augmentovanou nebo smíšenou realitu?

Na XTEND umožňujeme uživatelům „teleportovat“ se do vzdáleného místa. Tato telepresence není nutně „virtuální realita“, ale spíše skutečná realita, ve které uživatelé mohou provádět různé profesionální nebo hobby aktivity. Označujeme to jako „XR“ nebo „XTENDED REALITY“, protože umožňuje uživatelům rychle a intuitivně rozšířit se do vzdáleného místa. Používáme technologii Augmented Reality k prezenci prostorových 3D grafik nad uživatelským zobrazením, abyexperience byla vylepšena a uživatelé byli schopni plně interagovat s prostředím (například architekt může vidět návrh budovy; dítě může vidět Star-Wars-like obchody integrované do svého lokálního prostředí; voják může vidět data o bojišti)

Vaše předchozí startup, Replay Technologies, byl nakonec získán Intel (INTC ). Můžete popsat technologii, kterou jste vyvinuli na Replay Technologies?

Na Replay jsme vyvinuli Emmy-award winning Volumetric Video formát a technologii nazvanou „freeD“. FreeD fungoval tak, že zachycoval realitu pomocí třírozměrných voxelů místo dvourozměrných pixelů, jako je tomu u běžných video formátů. Tato technologie byla použita většinou hlavních sportovních lig po celém světě (NBA, NFL, MLB, Euro Soccer, US Open a další) pro vytvoření 360 replays – vytvářející iluzi kamery, kde nebyla fyzická kamera. Naše začátky na Replay inspirovaly koncept „telepresence“ – protože jsme mohli umožnit uživateli „teleportovat“ se přímo do sportovního arény a běžet s jeho oblíbenými hráči. Kromě toho, s XTEND, děláme to prostřednictvím dronů.

Jaký je příběh za XTEND?

XTEND vznikl z Replay a později byl prodán Intel Sports, když zakladatelé Aviv a Matteo rozhodli pokračovat v nových aktivitách. Bratři se setkali s Rubi Liani, zakladatelem Izraelské Drone Racing Ligy (FRIL | DRL) a Adirem Tubim (specialistou na obranu), kde zjistili, že z hlediska U(X) drony připomínají, co byly počítače před 30-40 lety. Neexistoval žádný snadný způsob, jak zažít tuto „realitu“ s snadným použitím nebo moderním imerzivním prožitkem; pouze „geekové“ mohli přizpůsobit a provozovat je efektivně.

XTEND se rozhodl změnit vše. Rozhodli se, že obrana by měla být prvním trhem, který pronikne, a pomoci vojákům, policii a prvním respondentům reagovat na výzvu. Technologie umožňuje těmto operátorům provádět úkoly prostřednictvím létajícího stroje, což dramaticky snižuje riziko pro lidské životy (*viz odkaz na „před | po“ klipy XTEND v různých disruptivních ekosystémech). První proof of concept (POC) XTEND byl systém nazvaný SKYLORD HUNTER. Ukázal se být game-changerem v oblasti leteckého zásahu, protože umožnil každému vojákovi hlídkujícímu na jižní hranici Gazy snadno zachytit každou hrozbu, která přišla z nebe (drony, zápalné balóny atd.) efektivně a účinně.

Jak bude XR Platforma umožňovat uživateli ovládat řadu autonomních robotů?

Nápad za XTEND je game-changing. Místo toho, aby měl úplně automatizovaný „tým“ autonomních robotů, kteří provádějí úplně nezávislé úkoly, cílíme na integraci lidí a strojů, aby využili nejlepší výhody obou entit. Místo nahrazování lidí týmy autonomních strojů vyvíjíme Human-Centric Machine Operating System, který umožňuje snadno rozhranit a „teleportovat“ se do vzdálené reality a provádět různé funkce. Část této OS je schopnost „multi-presence“ – To znamená, ovládat několik strojů současně. Například si představte tým 10 hasicích dronů, kteří dorazí na místo katastrofy, umožňující jednomu hasiči snadno přepínat mezi nimi, aby ovládal požár a zachránil přeživší. Každý dron (nebo „uzel“) může mít různé dovednosti/nástroje, jako je rozbití okna, shození požárního odstrašovače, komunikace s oběťmi, přenos dat uvnitř komplexní budovy a další…

Můžete diskutovat některé technologie strojového učení nebo jiné technologie, které usnadňují prožívání vzdálených realit?

Používáme hlavně strojové učení, aby drony mohly „průhledně“ a přesně navigovat v prostředí. Aby dron mohl fungovat bezproblémově a přesně v jakémkoli prostředí (vnitřní, venkovní, světlo, tma, komplexní, jednoduché), stroj musí „naučit se“ chovat přesně v nepředvídatelných a dynamických situacích. Vyvíjíme řadu algoritmů, aby umožnily takovou přesnou lidsko-strojovou operativitu (kde je osoba agnostická k jakýmkoli omezením nebo operacím stroje – Jsou „průhledné“ pro ně stejně jako operační systém maskuje všechny své vnitřní procesy pro uživatele)

Dále naše technologie používá „stacked AI layers“, které umožňují dronům „služebně“ obsluhovat lidského operátora na pozadí: Od predikce cesty a vyhnutí se kolizím až po umožnění „child nodes“ ve swarm týmu, aby následovali leadera a efektivně hlídkovali.

XTEND’s počáteční produktový launch je SKYLORD, který pomáhá vojákům a prvním respondentům. Můžete diskutovat, co je SKYLORD a co ho činí tak disruptivním?

SKYLORD je revoluční platforma. Umožňuje každému ne-profesionálnímu dron operátorovi snadno a přesně použít sadu dronů. Tato technologie efektivně snižuje riziko a ztrátu lidského života na bojišti, protože fyzická přítomnost není vyžadována. Dnes jsou drony buď 100% autonomní nebo velmi obtížně ovladatelné pro uživatele. XTEND’s technologie dělá použití taktických dronů snadným. Například, proč stormovat dům s teroristy, pokud dron může provést stejný úkol, jako kdyby operátor byl fyzicky přítomen? Technologie se neustále vyvíjí, aby maximalizovala potenciál AI a SWARM založených technologií, aby umožnila jednomu operátorovi efektivně ovládat tým dronů s různými náklady a schopnostmi s lidsko-strojovým přístupem.

Jaké jsou některé potenciální herní aplikace XTEND technologie?

Potenciál je enormní. Dnes, pokud koupíme dron, aby létal kolem, je to prakticky k ničemu, a aby dosáhli úrovně Drone Racing League (DRL) vzrušení, je vyžadováno několik let praxe. My umožňujeme XR experience „out-of-the-box“, umožňující komukoli hrát vzrušující reálné first-person-view hry bez nutnosti stát se profesionálním operátorem dronu. Tento potenciál může umožnit nové formy tematických parků a nových způsobů, jak mít zábavu venku – Nové interaktivní formy vzdálené turistiky.

Je něco jiného, co byste chtěli sdílet o XTEND?

Nový koncept kombinace lidí a strojů nabízí mnoho zajímavých možností. Bez ohledu na to, zda se jedná o vytvoření rychlé městské flotily prvních respondentů nebo umožnění další generace GoPro-like technologie, XTEND’s konečným cílem zůstává stejný. Usilujeme o konstrukci reality, ve které by každý z nás mohl být kdekoli, v jakémkoli okamžiku, plně interagovat s tím vzdáleným prostředím.

Děkuji za rozhovor, tato technologie vypadá, jako by mohla být potenciálně hrou měnící. Čtenáři, kteří chtějí se dozvědět více, by měli navštívit XTEND .