Matteo Shapira, Co-Founder & CXO of XTEND – Intervieuserie

Matteo Shapira er Co-Founder & CXO af XTEND, en revolutionerende telepresence-platform, der giver mennesker mulighed for at udvide sig selv virtuelt til handling via et menneskecentreret maskininterface-model. Modellen kombinerer både menneskers og maskiners bedste egenskaber for at udføre disruptivt komplekse opgaver.

Kan du begynde med at forklare, hvordan Xtended Reality (XR) adskiller sig eller kombinerer virtuel, forstærket eller blandet virkelighed?

Hos XTEND giver vi brugerne mulighed for at “teleportere” sig til en fjernbeliggenhed. Denne telepresence er ikke nødvendigvis en “virtuel virkelighed”, men snarere en rigtig virkelighed, hvor brugerne kan udføre forskellige professionelle eller hobby-relaterede aktiviteter. Vi kalder dette for “XR” eller “XTENDED REALITY”, da det giver brugerne mulighed for hurtigt og intuitivt at udvide sig selv til en fjernbeliggenhed. Vi bruger Augmented Reality-teknologi til at præsentere rumlige 3D-grafikker oven på brugerens udsigt for at forbedre og styrke oplevelsen (f.eks. kan en arkitekt se bygningens design; et barn kan se Star-Wars-lignende butikker integreret i deres lokale miljø; en soldat kan se data om slagmarken)

Dit tidligere startup, Replay Technologies, blev til sidst opkøbt af Intel (INTC ). Kan du beskrive den teknologi, du var med til at udvikle hos Replay Technologies?

Hos Replay udviklede vi en Emmy-prisvindende Volumetric Video-format & teknologi kaldet “freeD”. FreeD fungerede ved at fange virkeligheden med tre-dimensionelle voxler i stedet for to-dimensionelle pixler som almindelige videoformater. Teknologien blev brugt af de fleste store sportsligaer globalt (NBA, NFL, MLB, Euro Soccer, US Open og mere) til at skabe 360-grafik – og skabe illusionen om en kamera, hvor der ikke var nogen fysisk kamera. Vores begyndelse hos Replay inspirerede konceptet “telepresence” – da vi kunne give brugeren mulighed for at “teleportere” sig selv lige ind i sportsarenaen og løbe rundt med deres favoritholdspillere. Undtagen at med XTEND gør vi dette via droner.

Hvad er genesis-historien bag XTEND?

XTEND blev født ud af Replay og senere solgt til Intel Sports, da grundlæggerne Aviv & Matteo besluttede at gå videre til nye eventyr. Brødrene mødte Rubi Liani, grundlægger af den israelske Drone Racing League (FRIL | DRL) og Adir Tubi (en forsvarsspecialist), hvor de opdagede, at i forhold til U(X) ligner droner, hvad computere var for 30-40 år siden. Der var ingen nem måde at opleve denne “virkelighed” med brugervenlighed eller en moderne immersiv oplevelse; kun “geeks” kunne tilpasse og operere dem effektivt.

XTEND satte sig for at ændre alt dette. De besluttede, at forsvar skulle være det første marked at trænge ind i, og hjælpe soldater, politi og førstehjælpere med at svare på kald til pligten. Teknologien giver nævnte operatører mulighed for at udføre deres opgaver via en flyvende maskine, hvilket dramatisk reducerer risikoen for menneskeliv (*se link til “før | efter”-klip af XTEND i forskellige disruptivt økosystem). XTEND’s første proof of concept (POC) var et system kaldet SKYLORD HUNTER. Det viste sig at være en game-changer i feltet luftinterception, da det gav enhver soldat, der patruljerede den sydlige Gazastribe, mulighed for let at interceptere enhver trussel, der kom fra himlen (droner, ildkugler, osv.) effektivt og effektivt.

Hvordan vil XR-platformen give en bruger mulighed for at styre en række autonome robotter?

Idéen bag XTEND er game-changer. I stedet for at have et fuldstændigt automatiseret “hold” af autonome robotter, der udfører fuldstændigt uafhængige opgaver, sigter vi mod at integrere mennesker og maskiner for at assimilere begges bedste fordele. I stedet for at erstatte mennesker med hold af autonome maskiner udvikler vi et menneskecentreret maskinoperativsystem, der giver os mulighed for let at interface og “teleportere” os ind i en fjern virkelighed og udføre forskellige funktioner. En del af dette operativsystems kernefunktion er at kunne “multi-presence” – det vil sige styre flere maskiner samtidigt. F.eks. kan man forestille sig et hold på 10 brandbiler, der når et katastrofeområde, og giver en enkelt brandmand mulighed for let at skifte mellem dem for at styre branden og redde overlevende. Hver drone (eller “node”) kan have forskellige færdigheder/værktøjsæt, såsom at bryde en vindue, slippe en branddæmpende, kommunikere med ofre, formidle data inde i et kompleks bygning, og mere…

Kan du diskutere nogen maskinlærings- eller andre teknologier, der faciliterer oplevelsen af fjern virkeligheder?

Vi bruger primært maskinlæringsalgoritmer til at hjælpe dronerne med “transparent” og præcis miljøagnostisk navigation. For at en drone kan operere problemfrit og præcist i ethvert miljø (indendørs, udendørs, lys, mørk, kompleks, simpel), skal maskinen “lære sig selv” at opføre sig præcist i uforudsigelige og dynamiske situationer. Vi udvikler en række algoritmer til at aktivere sådan præcis menneskecentreret maskinoperativitet (hvor personen er uafhængig af maskinens begrænsninger eller operationer – de er “transparente” for dem på samme måde, som et operativsystem skjuler alle sine interne processer for brugeren)

Desuden bruger vores teknologi, hvad vi kalder “stackede AI-lag”, der giver dronerne mulighed for at “betjene” den menneskelige operatør bag scenen: Fra sti-prædiktion og kollision undgåelse til at aktivere “barn-noder” i en sværme-hold for at følge lederen og patruljere effektivt.

XTEND’s første produktlancering er SKYLORD, der hjælper militæret og førstehjælpere. Kan du diskutere, hvad SKYLORD er, og hvad der gør det så disruptivt?

SKYLORD er en revolutionerende platform. Den giver enhver ikke-professionel drone-operatør mulighed for at let og præcist bruge et værktøjsæt af droner. Denne teknologi reducerer effektivt risikoen og tabet af menneskeliv på slagmarken, da en fysisk tilstedeværelse ikke er nødvendig. I dag er droner enten 100% autonome eller meget svære for en bruger at operere effektivt. XTEND’s teknologi gør det let at bruge taktiske droner. F.eks. hvorfor storme et hus med terrorister, hvis en drone kan udføre samme opgave, som hvis operatøren var der fysisk? Teknologien udvikles kontinuerligt for at maksimere potentialet for AI og SWARM-baserede teknologier for at give en enkelt operatør mulighed for at effektivt styre et hold af droner med forskellige laster og evner med en menneskecentreret tilgang i stedet for en fuldstændigt autonome.

Hvad er nogle af de potentielle gaming-anvendelser af XTEND-teknologien?

Potentialet er enormt. I dag, hvis vi køber en drone for at flyve rundt, er det næsten værdiløst, og for at opnå Drone Racing League (DRL)-spændingsniveauer, kræver det årers træning. Vi giver en XR-oplevelse “out-of-the-box”, der giver enhver mulighed for at spille spændende first-person-view-spil uden at skulle blive dygtig til at operere en drone. Dette potentiale kan aktivere nye former for temapark-rutschebaner og nye måder at have casual sjov udenfor – til nye former for interaktiv fjern-turisme.

Er der noget andet, du gerne vil dele om XTEND?

Det nye koncept med at kombinere mennesker med maskiner præsenterer mange spændende muligheder. Enten det er at skabe en rapidt by-omfattende førstehjælpsflåde eller give næste generation af GoPro-lignende teknologi, XTEND’s ultimative mål forbliver det samme. Vi stræber efter at konstruere en virkelighed, hvor hver enkelt af os kan være overalt, på ethvert givent øjeblik, og interagere fuldt ud med den fjernmiljø.

Tak for interviewet, dette lyder som det kunne være en potentielt spil-forandrende teknologi. Læsere, der ønsker at lære mere, kan besøge XTEND.