Matteo Shapira, Mitbegründer und CXO von XTEND – Interview Series

Matteo Shapira ist Mitbegründer und CXO von VERLÄNGERN, eine revolutionäre Telepräsenzplattform, die es Menschen ermöglicht, über ein menschzentriertes Maschinenschnittstellenmodell virtuell in Aktion zu treten. Das Modell kombiniert die besten Eigenschaften von Mensch und Maschine, um disruptive, komplexe Aufgaben auszuführen.

Könnten Sie zunächst erklären, wie sich Xtended Reality (XR) von virtueller, erweiterter oder gemischter Realität unterscheidet oder diese miteinander verbindet?

Bei XTEND ermöglichen wir den Benutzern, sich an einen entfernten Ort zu „teleportieren“. Bei dieser Telepräsenz handelt es sich nicht unbedingt um eine „virtuelle Realität“, sondern um eine reale Realität, in der Benutzer verschiedene berufliche oder hobbymäßige Aktivitäten ausführen können. Wir bezeichnen dies als „XR“ oder „XTENDED REALITY“, da es Benutzern ermöglicht, schnell und intuitiv an einen entfernten Standort vorzudringen. Wir verwenden Augmented-Reality-Technologie, um räumliche 3D-Grafiken über der Sicht des Benutzers zu präsentieren, um das Erlebnis zu verbessern und zu verstärken (z. B. kann ein Architekt das Design des Gebäudes sehen; ein Kind kann Star-Wars-ähnliche Geschäfte sehen, die in seine lokale Umgebung integriert sind; a Soldat kann Daten über das Schlachtfeld sehen)

Ihr vorheriges Startup, Replay Technologies, wurde schließlich von Intel übernommen. Könnten Sie die Technologie beschreiben, die Sie bei Replay Technologies entwickelt haben?

Bei Replay haben wir ein mit dem Emmy-Award ausgezeichnetes Volumetric Video-Format und eine Technologie namens „freeD“ entwickelt. FreeD funktionierte, indem es die Realität mit dreidimensionalen Voxeln statt mit zweidimensionalen Pixeln wie bei herkömmlichen Videoformaten erfasste. Die Technologie wurde von den meisten großen Sportligen weltweit (NBA, NFL, MLB, Euro Soccer, US Open und mehr) genutzt, um 360-Grad-Wiederholungen zu erstellen – und so die Illusion einer Kamera zu erzeugen, wo es keine physische Kamera gab. Unsere Anfänge bei Replay inspirierten das Konzept der „Telepräsenz“ – da wir es dem Benutzer ermöglichen konnten, sich direkt in die Sportarena zu „teleportieren“ und mit den Spielern seiner Lieblingsmannschaft herumzulaufen. Allerdings machen wir das bei XTEND über Drohnen.

Was ist die Entstehungsgeschichte hinter XTEND?

XTEND entstand aus Replay und wurde später an Intel Sports verkauft, als die Gründer Aviv und Matteo beschlossen, sich neuen Unternehmungen zu widmen. Die Brüder trafen sich mit Rubi Liani, Gründerin der Israeli Drone Racing League (FRIL | DRL), und Adir Tubi (einem Verteidigungsspezialisten), wo sie herausfanden, dass Drohnen in Bezug auf U(X) dem ähneln, was Computer vor 30 bis 40 Jahren waren . Es gab keine einfache Möglichkeit, diese „Realität“ mit einfacher Bedienung oder einem modernen immersiven Erlebnis zu erleben; Nur „Geeks“ könnten sie anpassen und effektiv bedienen.

XTEND hat es sich zum Ziel gesetzt, dies alles zu ändern. Sie beschlossen, dass die Verteidigung der erste Markt sein sollte, der in den Markt eindringt und Soldaten, Polizisten und Ersthelfern dabei hilft, den Ruf der Pflicht zu erfüllen. Die Technologie ermöglicht es den Betreibern, ihre Aufgaben über eine Flugmaschine auszuführen, was das Risiko für Menschenleben drastisch reduziert (*siehe Link zu „Vorher | Nachher“-Clips von XTEND in verschiedenen disruptiven Ökosystemen). Der erste Proof of Concept (POC) von XTEND war ein System namens SKYLORD HUNTER. Es erwies sich als bahnbrechend auf dem Gebiet der Luftüberwachung, da es jedem Soldaten, der an der südlichen Grenze des Gazastreifens patrouillierte, ermöglichte, jede vom Himmel kommende Bedrohung (Drohnen, Brandballons usw.) effizient und effektiv abzufangen.

Wie ermöglicht die XR-Plattform einem Benutzer, eine Reihe autonomer Roboter zu steuern?

Die Idee hinter XTEND ist bahnbrechend. Anstelle eines vollständig automatisierten „Teams“ autonomer Roboter, die völlig unabhängige Aufgaben ausführen, wollen wir Menschen und Maschinen integrieren, um die besten Vorteile beider Einheiten zu nutzen. Anstatt Menschen durch Teams autonomer Maschinen zu ersetzen, entwickeln wir ein menschzentriertes Maschinenbetriebssystem, das es uns ermöglicht, einfach in eine entfernte Realität einzubinden, uns dorthin zu „teleportieren“ und verschiedene Funktionen auszuführen. Zu den Kernfunktionen dieses Betriebssystems gehört die Fähigkeit zur „Multipräsenz“, also zur gleichzeitigen Steuerung mehrerer Maschinen. Zum Beispiel: Stellen Sie sich ein Team aus 10 Löschdrohnen vor, die einen Katastrophenort erreichen, sodass ein einzelner menschlicher Feuerwehrmann problemlos zwischen ihnen wechseln kann, um das Feuer zu kontrollieren und Überlebende zu retten. Jede Drohne (oder „Knotenpunkt“) kann über unterschiedliche Fähigkeiten/Tools verfügen, wie z. B. das Einschlagen eines Fensters, das Abwerfen eines Brandschutzmittels, die Kommunikation mit Opfern, die Weiterleitung von Daten innerhalb eines komplexen Gebäudes und mehr …

Können Sie über maschinelles Lernen oder andere Technologien sprechen, die das Erleben entfernter Realitäten erleichtern?

Wir nutzen hauptsächlich maschinelles Lernen, um die Drohnen bei der „transparenten“ und genauen umgebungsunabhängigen Navigation zu unterstützen. Damit eine Drohne in jeder Umgebung (drinnen, draußen, hell, dunkel, komplex, einfach) reibungslos und präzise funktionieren kann, muss sich die Maschine „selbst beibringen“, sich in unvorhersehbaren und dynamischen Situationen genau zu verhalten. Wir entwickeln eine Reihe von Algorithmen, um eine solch genaue, auf den Menschen ausgerichtete Maschinenbedienung zu ermöglichen (wobei die Person keinerlei Rücksicht auf Einschränkungen oder Vorgänge der Maschine nimmt – sie sind für sie in etwa auf die gleiche Weise „transparent“, wie ein Betriebssystem alle seine Funktionen maskiert). interne Prozesse des Benutzers)

Darüber hinaus nutzt unsere Technologie sogenannte „gestapelte KI-Ebenen“, die es Drohnen ermöglichen, den menschlichen Bediener hinter den Kulissen zu „bedienen“: von der Pfadvorhersage und Kollisionsvermeidung bis hin zur Möglichkeit, „untergeordnete Knoten“ in einem Schwarmteam in die Lage zu versetzen, dem Anführer zu folgen und effektiv zu patrouillieren .

Die erste Produkteinführung von XTEND ist SKYLORD, das das Militär und Ersthelfer unterstützt. Können Sie erläutern, was SKYLORD ist und was es so störend macht?

SKYLORD ist eine revolutionäre Plattform. Es ermöglicht jedem nicht-professionellen Drohnenbetreiber die einfache und genaue Verwendung eines Drohnen-Toolset. Diese Technologie reduziert effektiv das Risiko und den Verlust von Menschenleben auf dem Schlachtfeld, da keine physische Anwesenheit erforderlich ist. Heutzutage sind Drohnen entweder zu 100 % autonom oder für den Benutzer nur sehr schwer effektiv zu bedienen. Die Technologie von XTEND macht den Einsatz taktischer Drohnen zum Kinderspiel. Warum zum Beispiel ein Haus mit Terroristen stürmen, wenn eine Drohne die gleiche Aufgabe erfüllen kann, als ob der Bediener direkt vor Ort wäre? Die Technologie wird kontinuierlich weiterentwickelt, um das Potenzial von KI- und SWARM-basierten Technologien zu maximieren und es einem einzelnen Bediener zu ermöglichen, ein Team von Drohnen mit unterschiedlichen Nutzlasten und Fähigkeiten effektiv zu steuern, und zwar mit einem menschenzentrierten Ansatz gegenüber einem vollständig autonomen Ansatz. 

Was sind einige der potenziellen Gaming-Anwendungen der XTEND-Technologie?

Das Potenzial ist enorm. Wenn wir heute eine Drohne kaufen, um herumzufliegen, ist sie praktisch nutzlos, und um das aufregende Niveau der Drone Racing League (DRL) zu erreichen, bedarf es jahrelanger Übung. Wir ermöglichen ein XR-Erlebnis „out-of-the-box“, das es jedem ermöglicht, spannende First-Person-View-Spiele im echten Leben zu spielen, ohne sich mit der Bedienung einer Drohne auskennen zu müssen. Dieses Potenzial kann neue Arten von Fahrgeschäften in Themenparks und neue Möglichkeiten für ungezwungenen Spaß im Freien ermöglichen – bis hin zu neuen interaktiven Formen des Ferntourismus.

Gibt es noch etwas, das Sie über XTEND mitteilen möchten?

Das neuartige Konzept der Kombination von Menschen und Maschinen bietet viele spannende Möglichkeiten. Ob es darum geht, eine schnelle stadtweite Ersthelferflotte aufzubauen oder die nächste Generation GoPro-ähnlicher Technologie zu ermöglichen, das ultimative Ziel von XTEND bleibt dasselbe. Wir streben danach, eine Realität zu schaffen, in der jeder von uns jederzeit und überall sein und vollständig mit dieser abgelegenen Umgebung interagieren kann.

Vielen Dank für das Interview. Das hört sich so an, als könnte es sich möglicherweise um eine bahnbrechende Technologie handeln. Leser, die mehr erfahren möchten, sollten vorbeischauen VERLÄNGERN .