Matteo Shapira, co-fondateur et CXO de XTEND - Série d'interviews

Matteo Shapira, est le co-fondateur et CXO de EXTEND, une plateforme de téléprésence révolutionnaire qui permet aux humains de s'étendre virtuellement dans l'action grâce à un modèle d'interface machine centré sur l'humain. Ce modèle combine les meilleures qualités des humains et des machines pour réaliser des tâches complexes et disruptives.

Pourriez-vous commencer par expliquer en quoi Xtended Reality (XR) diffère ou fusionne la réalité virtuelle, augmentée ou mixte ?

Chez XTEND, nous permettons aux utilisateurs de se téléporter vers un lieu distant. Cette téléprésence n'est pas nécessairement une « réalité virtuelle », mais plutôt une réalité réelle, où les utilisateurs peuvent exercer diverses activités professionnelles ou de loisirs. Nous appelons cela « XR » ou « RÉALITÉ EXTENDUE », car elle permet aux utilisateurs de se déplacer rapidement et intuitivement vers un lieu distant. Nous utilisons la technologie de réalité augmentée pour présenter des graphiques 3D spatiaux au-dessus de la vue de l'utilisateur afin d'améliorer et de dynamiser l'expérience (par exemple, un architecte peut visualiser la conception du bâtiment ; un enfant peut voir des boutiques de style Star Wars intégrées à son environnement ; un soldat peut consulter des données sur le champ de bataille).

Votre startup précédente, Replay Technologies, a finalement été rachetée par Intel. Pourriez-vous décrire la technologie dont vous avez été le pionnier chez Replay Technologies ?

Chez Replay, nous avons développé un format et une technologie de vidéo volumétrique primés aux Emmy Awards appelés "freeD". FreeD a fonctionné en capturant la réalité avec des voxels tridimensionnels au lieu de pixels bidimensionnels comme les formats vidéo ordinaires. La technologie a été utilisée par la plupart des grandes ligues sportives du monde (NBA, NFL, MLB, Euro Soccer, US Open, etc.) pour créer des rediffusions à 360°, créant l'illusion d'une caméra là où il n'y avait pas de caméra physique. Nos débuts chez Replay ont inspiré le concept de "téléprésence" - puisque nous pouvions permettre à l'utilisateur de se "téléporter" directement à l'intérieur de l'arène sportive et de courir avec ses joueurs d'équipe préférés. Sauf qu'avec XTEND, on fait ça via des drones.

Quelle est l'histoire de la genèse derrière XTEND ?

XTEND est né de Replay et a ensuite été vendu à Intel Sports lorsque les fondateurs Aviv & Matteo ont décidé de se lancer dans de nouvelles activités. Les frères ont rencontré Rubi Liani, fondateur de l'Israeli Drone Racing League (FRIL | DRL) et Adir Tubi (un spécialiste de la défense), où ils ont découvert qu'en termes d'U(X), les drones ressemblent à ce qu'étaient les ordinateurs il y a 30-40 ans. . Il n'y avait pas de moyen facile de découvrir cette « réalité » avec une facilité d'utilisation ou une expérience immersive moderne ; seuls les « geeks » pouvaient les personnaliser et les utiliser efficacement.

XTEND a décidé de changer la donne. Ils ont décidé que la défense devait être le premier marché à pénétrer, aidant les soldats, la police et les premiers intervenants à répondre à l'appel du devoir. Cette technologie permet aux opérateurs d'effectuer leurs tâches via un engin volant, ce qui réduit considérablement les risques pour les vies humaines (*voir le lien vers les clips « avant | après » de XTEND dans divers écosystèmes disruptifs). La première preuve de concept (POC) de XTEND était un système appelé SKYLORD HUNTER. Ce système a révolutionné le domaine de l'interception aérienne, permettant à tout soldat patrouillant à la frontière sud de Gaza d'intercepter facilement et efficacement toute menace aérienne (drones, ballons incendiaires, etc.).

Comment la plateforme XR permettra-t-elle à un utilisateur de contrôler une gamme de robots autonomes ?

L'idée derrière XTEND est révolutionnaire. Au lieu d'une équipe entièrement automatisée de robots autonomes effectuant des tâches totalement indépendantes, nous cherchons à intégrer les humains et les machines afin d'exploiter pleinement les atouts de chaque entité. Plutôt que de remplacer les humains par des équipes de machines autonomes, nous développons un système d'exploitation centré sur l'humain, permettant de s'interfacer et de se téléporter facilement dans une réalité distante et d'exécuter diverses fonctions. L'une des principales capacités de ce système d'exploitation réside dans sa capacité à être multi-présence, c'est-à-dire à contrôler plusieurs machines simultanément. Prenons l'exemple d'une équipe de dix drones de lutte contre l'incendie arrivant sur le site d'une catastrophe, permettant à un seul pompier humain de passer facilement de l'un à l'autre pour contrôler l'incendie et secourir les survivants. Chaque drone (ou « nœud ») peut disposer de compétences et d'outils différents, comme briser une vitre, larguer un dispositif de dissuasion, communiquer avec les victimes, relayer des données à l'intérieur d'un bâtiment complexe, etc.

Pouvez-vous discuter de l'apprentissage automatique ou d'autres technologies qui facilitent l'expérience des réalités à distance ?

Nous utilisons principalement l'apprentissage automatique pour aider les drones dans une navigation agnostique à l'environnement "transparente" et précise. Pour qu'un drone fonctionne de manière transparente et précise dans n'importe quel environnement (intérieur, extérieur, clair, sombre, complexe, simple), la machine doit "s'apprendre" à se comporter avec précision dans des situations imprévisibles et dynamiques. Nous développons un assortiment d'algorithmes pour permettre une opérabilité aussi précise de la machine centrée sur l'humain (où la personne est agnostique à toute limitation ou opération de la machine - Ils sont "transparents" pour eux de la même manière qu'un système d'exploitation masque tous ses processus internes de l'utilisateur)

De plus, notre technologie utilise ce que nous appelons des « couches d'IA empilées », permettant aux drones de « servir » l'opérateur humain dans les coulisses : de la prédiction de chemin et de l'évitement des collisions à l'activation des « nœuds enfants » dans une équipe en essaim pour suivre le chef et patrouiller efficacement. .

Le lancement initial du produit XTEND est SKYLORD, qui assiste les militaires et les premiers intervenants. Pouvez-vous discuter de ce qu'est SKYLORD et de ce qui le rend si perturbateur ?

SKYLORD est une plateforme révolutionnaire. Il permet à tout opérateur de drone non professionnel d'utiliser facilement et avec précision un ensemble d'outils de drones. Cette technologie réduit efficacement les risques et les pertes de vies humaines sur le champ de bataille, car une présence physique n'est pas requise. Aujourd'hui, les drones sont soit 100 % autonomes, soit très difficiles à utiliser efficacement pour un utilisateur. La technologie XTEND facilite l'utilisation des drones tactiques. Par exemple, pourquoi prendre d'assaut une maison avec des terroristes si un drone peut effectuer la même tâche que si l'opérateur était là physiquement ? La technologie évolue continuellement pour maximiser le potentiel des technologies basées sur l'IA et SWARM afin de permettre à un seul opérateur de contrôler efficacement une équipe de drones avec diverses charges utiles et capacités avec une approche centrée sur l'humain par rapport à une approche entièrement autonome. 

Quelles sont certaines des applications de jeu potentielles de la technologie XTEND ?

Le potentiel est énorme. Aujourd'hui, si nous achetons un drone pour voler, il est pratiquement inutile, et pour atteindre les niveaux d'excitation de la Drone Racing League (DRL), il faut des années de pratique. Nous permettons une expérience XR "prête à l'emploi", permettant à quiconque de jouer à des jeux de vue à la première personne passionnants dans la vie réelle sans avoir besoin de maîtriser l'utilisation d'un drone. Ce potentiel peut permettre de nouveaux types de manèges dans les parcs à thème et de nouvelles façons de s'amuser à l'extérieur - vers de nouvelles formes interactives de tourisme à distance.

Y a-t-il autre chose que vous aimeriez partager à propos de XTEND ?

Le concept novateur de l'association de l'humain et de la machine offre de nombreuses possibilités prometteuses. Qu'il s'agisse de créer une flotte de premiers secours rapide à l'échelle d'une ville ou de développer une technologie de type GoPro de nouvelle génération, l'objectif ultime de XTEND reste le même : construire une réalité où chacun d'entre nous pourrait être partout, à tout moment, en interaction totale avec cet environnement isolé.

Merci pour l'interview, cela ressemble à une technologie qui pourrait potentiellement changer la donne. Les lecteurs qui souhaitent en savoir plus devraient visiter EXTEND .