Matteo Shapira, co-fundador e CXO da XTEND – série de entrevistas

Matteo Shapira, é o co-fundador e CXO da EXTEND, uma revolucionária plataforma de telepresença que permite que os humanos se estendam virtualmente à ação por meio de um modelo de interface de máquina centrado no ser humano. O modelo combina as melhores qualidades de humanos e máquinas para executar tarefas complexas e disruptivas.

Você poderia começar explicando como a Xtended Reality (XR) difere ou mescla a realidade virtual, aumentada ou mista?

No XTEND, permitimos que os usuários se 'teletransportem' para um local remoto. Esta telepresença não é necessariamente uma 'realidade virtual', mas sim uma realidade real, onde os usuários podem realizar diversas atividades profissionais ou amadores. Nós nos referimos a isso como 'XR' ou 'XTENDED REALITY', pois permite que os usuários se estendam de forma rápida e intuitiva a um local remoto. Usamos a tecnologia de Realidade Aumentada para apresentar gráficos 3D espaciais no topo da visão do usuário para aprimorar e capacitar a experiência (ou seja, um arquiteto pode ver o design do edifício; uma criança pode ver lojas do tipo Guerra nas Estrelas integradas em seu ambiente local; um soldado pode ver dados sobre o campo de batalha)

Sua startup anterior, Replay Technologies, acabou sendo adquirida pela Intel. Você poderia descrever a tecnologia em que foi pioneiro na Replay Technologies?

Na Replay, desenvolvemos um formato e tecnologia de vídeo volumétrico premiado com o Emmy chamado 'freeD'. FreeD trabalhou capturando a realidade com voxels tridimensionais em vez de pixels bidimensionais como formatos de vídeo comuns. A tecnologia foi usada pela maioria das principais ligas esportivas em todo o mundo (NBA, NFL, MLB, Euro Soccer, US Open e mais) para criar replays 360 – criando a ilusão de uma câmera onde não havia câmera física. Nosso início na Replay inspirou o conceito de “telepresença” – já que podíamos permitir que o usuário se 'teletransportasse' dentro da arena esportiva e corresse com os jogadores de seu time favorito. Só que com o XTEND, fazemos isso via drones.

Qual é a história da gênese por trás do XTEND?

A XTEND nasceu da Replay e depois foi vendida para a Intel Sports quando os fundadores Aviv & Matteo decidiram partir para novos empreendimentos. Os irmãos se encontraram com Rubi Liani, fundador da Israel Drone Racing League (FRIL | DRL) e Adir Tubi (especialista em defesa), onde descobriram que em termos de U(X), os drones se assemelham ao que eram os computadores 30-40 anos atrás . Não havia uma maneira fácil de experimentar essa 'realidade' com facilidade de uso ou uma experiência imersiva moderna; apenas 'geeks' poderiam personalizá-los e operá-los de forma eficaz.

A XTEND decidiu mudar tudo isso. Eles decidiram que a defesa deveria ser o primeiro mercado a penetrar, ajudando soldados, policiais e socorristas a responder ao chamado do dever. A tecnologia permite que os referidos operadores executem suas tarefas por meio de uma máquina voadora, o que reduz drasticamente o risco para vidas humanas (*veja o link para clipes “antes | depois” de XTEND em vários ecossistemas disruptivos). A primeira prova de conceito (POC) do XTEND foi um sistema chamado SKYLORD HUNTER. Ele provou ser um divisor de águas no campo da interceptação aérea, pois permitiu que qualquer soldado patrulhando a fronteira sul de Gaza interceptasse facilmente qualquer ameaça que viesse do céu (drones, balões incendiários, etc.) de forma eficiente e eficaz.

Como a plataforma XR permitirá que um usuário controle uma variedade de robôs autônomos?

A ideia por trás do XTEND é revolucionária. Em vez de ter uma “equipa” totalmente automatizada de robôs autônomos realizando tarefas totalmente independentes, pretendemos integrar humanos e máquinas para assimilar as melhores vantagens de ambas as entidades. Em vez de substituir humanos por equipes de máquinas autônomas, estamos desenvolvendo um Sistema Operacional de Máquina Centrada no Homem que nos permite interagir facilmente e 'teletransportar' para uma realidade remota e executar várias funções. Parte da capacidade principal deste sistema operacional é ser capaz de 'multipresença' - ou seja, controlar várias máquinas simultaneamente. Por exemplo: pense em uma equipe de 10 drones de combate a incêndio chegando a um local de desastre, permitindo que um único bombeiro humano alterne facilmente entre eles para controlar o incêndio e resgatar sobreviventes. Cada drone (ou “nó”) pode ter diferentes habilidades/conjuntos de ferramentas, como quebrar uma janela, deixar cair um elemento dissuasor de incêndio, comunicar-se com as vítimas, retransmitir dados dentro de um edifício complexo e muito mais…

Você pode discutir algum aprendizado de máquina ou outras tecnologias que facilitam a vivência de realidades remotas?

Usamos principalmente o aprendizado de máquina para auxiliar os drones na navegação agnóstica do ambiente 'transparente' e preciso. Para que um drone opere de forma perfeita e precisa em qualquer ambiente (interno, externo, claro, escuro, complexo, simples), a máquina precisa “ensinar a si mesma” a se comportar com precisão em situações imprevisíveis e dinâmicas. Estamos desenvolvendo uma variedade de algoritmos para permitir uma operabilidade de máquina centrada no ser humano tão precisa (onde a pessoa é independente de quaisquer limitações ou operações da máquina - eles são 'transparentes' para eles da mesma forma que um sistema operacional mascara todos os seus processos internos do usuário)

Além disso, nossa tecnologia usa o que chamamos de 'camadas de IA empilhadas', permitindo que os drones 'atendam' o operador humano nos bastidores: desde a previsão de caminho e prevenção de colisões até a habilitação de 'nós filhos' em uma equipe de enxame para seguir o líder e patrulhar com eficácia .

O lançamento inicial do produto XTEND é o SKYLORD, que auxilia militares e socorristas. Você pode discutir o que é SKYLORD e o que o torna tão perturbador?

SKYLORD é uma plataforma revolucionária. Ele permite que qualquer operador de drone não profissional use com facilidade e precisão um conjunto de ferramentas de drones. Essa tecnologia reduz efetivamente o risco e a perda de vidas humanas no campo de batalha, pois não é necessária a presença física. Hoje, os drones são 100% autônomos ou muito difíceis para um usuário operar de forma eficaz. A tecnologia da XTEND facilita o uso de drones táticos. Por exemplo, por que invadir uma casa com terroristas se um drone pode realizar a mesma tarefa como se o operador estivesse ali fisicamente? A tecnologia está evoluindo continuamente para maximizar o potencial das tecnologias baseadas em IA e SWARM para permitir que um único operador controle efetivamente uma equipe de drones com várias cargas úteis e habilidades com uma abordagem centrada no ser humano versus uma abordagem totalmente autônoma. 

Quais são algumas das possíveis aplicações de jogos da tecnologia XTEND?

O potencial é enorme. Hoje, se compramos um drone para voar, é praticamente inútil, e para atingir os níveis de emoção da Drone Racing League (DRL), são necessários anos de prática. Permitimos uma experiência XR “pronta para uso”, permitindo que qualquer pessoa jogue emocionantes jogos de visão em primeira pessoa da vida real sem a necessidade de se tornar proficiente na operação de um drone. Esse potencial pode permitir novos tipos de passeios em parques temáticos e novas maneiras de se divertir casualmente ao ar livre – para novas formas interativas de turismo remoto.

Existe mais alguma coisa que você gostaria de compartilhar sobre o XTEND?

O novo conceito de combinar humanos com máquinas apresenta muitas possibilidades interessantes. Seja criando uma frota rápida de socorristas em toda a cidade ou habilitando a próxima geração de tecnologia semelhante à GoPro, o objetivo final do XTEND permanece o mesmo. Nós nos esforçamos para construir uma realidade onde cada um de nós possa estar em qualquer lugar, a qualquer momento, interagindo plenamente com aquele ambiente remoto.

Obrigado pela entrevista, parece que pode ser uma tecnologia que pode mudar o jogo. Os leitores que desejam saber mais devem visitar EXTEND .