Matteo Shapira, co-fundador e CXO da XTEND – série de entrevistas

Matteo Shapira, é o co-fundador e CXO da EXTEND, uma plataforma revolucionária de telepresença que permite que humanos se estendam virtualmente para a ação por meio de um modelo de interface de máquina centrado no ser humano. O modelo combina as melhores qualidades de humanos e máquinas para executar tarefas complexas e disruptivas.

Você poderia começar explicando como a Xtended Reality (XR) difere ou mescla a realidade virtual, aumentada ou mista?

Na XTEND, permitimos que os usuários se "teletransportem" para um local remoto. Essa telepresença não é necessariamente uma "realidade virtual", mas sim uma realidade real, onde os usuários podem realizar diversas atividades profissionais ou amadoras. Chamamos isso de "XR" ou "REALIDADE XTENDIDA", pois permite que os usuários se estendam de forma rápida e intuitiva para um local remoto. Utilizamos a tecnologia de Realidade Aumentada para apresentar gráficos espaciais 3D sobre a visão do usuário, a fim de aprimorar e potencializar a experiência (por exemplo, um arquiteto pode ver o projeto do edifício; uma criança pode ver lojas semelhantes às de Star Wars integradas ao seu ambiente local; um soldado pode ver dados sobre o campo de batalha).

Sua startup anterior, Replay Technologies, acabou sendo adquirida pela Intel. Você poderia descrever a tecnologia em que foi pioneiro na Replay Technologies?

Na Replay, desenvolvemos um formato e tecnologia de vídeo volumétrico premiado com o Emmy chamado 'freeD'. FreeD trabalhou capturando a realidade com voxels tridimensionais em vez de pixels bidimensionais como formatos de vídeo comuns. A tecnologia foi usada pela maioria das principais ligas esportivas em todo o mundo (NBA, NFL, MLB, Euro Soccer, US Open e mais) para criar replays 360 – criando a ilusão de uma câmera onde não havia câmera física. Nosso início na Replay inspirou o conceito de “telepresença” – já que podíamos permitir que o usuário se 'teletransportasse' dentro da arena esportiva e corresse com os jogadores de seu time favorito. Só que com o XTEND, fazemos isso via drones.

Qual é a história da gênese por trás do XTEND?

A XTEND nasceu da Replay e depois foi vendida para a Intel Sports quando os fundadores Aviv & Matteo decidiram partir para novos empreendimentos. Os irmãos se encontraram com Rubi Liani, fundador da Israel Drone Racing League (FRIL | DRL) e Adir Tubi (especialista em defesa), onde descobriram que em termos de U(X), os drones se assemelham ao que eram os computadores 30-40 anos atrás . Não havia uma maneira fácil de experimentar essa 'realidade' com facilidade de uso ou uma experiência imersiva moderna; apenas 'geeks' poderiam personalizá-los e operá-los de forma eficaz.

A XTEND se propôs a mudar tudo isso. Eles decidiram que a defesa deveria ser o primeiro mercado a penetrar, ajudando soldados, policiais e socorristas a atender ao chamado do dever. A tecnologia permite que esses operadores executem suas tarefas por meio de uma máquina voadora, o que reduz drasticamente o risco de vidas humanas (*veja o link para os clipes "antes | depois" da XTEND em vários ecossistemas disruptivos). A primeira prova de conceito (POC) da XTEND foi um sistema chamado SKYLORD HUNTER. Ele provou ser um divisor de águas no campo da interceptação aérea, pois permitiu que qualquer soldado patrulhando a fronteira sul de Gaza interceptasse facilmente qualquer ameaça vinda do céu (drones, balões incendiários, etc.) com eficiência e eficácia.

Como a plataforma XR permitirá que um usuário controle uma variedade de robôs autônomos?

A ideia por trás do XTEND é revolucionária. Em vez de ter uma "equipe" completamente automatizada de robôs autônomos executando tarefas completamente independentes, buscamos integrar humanos e máquinas para assimilar as melhores vantagens de ambas as entidades. Em vez de substituir humanos por equipes de máquinas autônomas, estamos desenvolvendo um Sistema Operacional de Máquina Centrado no Ser Humano que nos permite interagir e "teletransportar" facilmente para uma realidade remota e executar diversas funções. Parte da principal capacidade deste Sistema Operacional é ser capaz de "multipresença" – ou seja, controlar várias máquinas simultaneamente. Por exemplo: imagine uma equipe de 10 drones de combate a incêndio chegando a um local de desastre, permitindo que um único bombeiro humano alterne facilmente entre eles para controlar o incêndio e resgatar sobreviventes. Cada drone (ou "nó") pode ter diferentes habilidades/conjuntos de ferramentas, como quebrar uma janela, lançar um dispositivo de dissuasão de incêndio, comunicar-se com vítimas, retransmitir dados dentro de um edifício complexo e muito mais...

Você pode discutir algum aprendizado de máquina ou outras tecnologias que facilitam a vivência de realidades remotas?

Usamos principalmente o aprendizado de máquina para auxiliar os drones na navegação agnóstica do ambiente 'transparente' e preciso. Para que um drone opere de forma perfeita e precisa em qualquer ambiente (interno, externo, claro, escuro, complexo, simples), a máquina precisa “ensinar a si mesma” a se comportar com precisão em situações imprevisíveis e dinâmicas. Estamos desenvolvendo uma variedade de algoritmos para permitir uma operabilidade de máquina centrada no ser humano tão precisa (onde a pessoa é independente de quaisquer limitações ou operações da máquina - eles são 'transparentes' para eles da mesma forma que um sistema operacional mascara todos os seus processos internos do usuário)

Além disso, nossa tecnologia usa o que chamamos de 'camadas de IA empilhadas', permitindo que os drones 'atendam' o operador humano nos bastidores: desde a previsão de caminho e prevenção de colisões até a habilitação de 'nós filhos' em uma equipe de enxame para seguir o líder e patrulhar com eficácia .

O lançamento inicial do produto XTEND é o SKYLORD, que auxilia militares e socorristas. Você pode discutir o que é SKYLORD e o que o torna tão perturbador?

SKYLORD é uma plataforma revolucionária. Ele permite que qualquer operador de drone não profissional use com facilidade e precisão um conjunto de ferramentas de drones. Essa tecnologia reduz efetivamente o risco e a perda de vidas humanas no campo de batalha, pois não é necessária a presença física. Hoje, os drones são 100% autônomos ou muito difíceis para um usuário operar de forma eficaz. A tecnologia da XTEND facilita o uso de drones táticos. Por exemplo, por que invadir uma casa com terroristas se um drone pode realizar a mesma tarefa como se o operador estivesse ali fisicamente? A tecnologia está evoluindo continuamente para maximizar o potencial das tecnologias baseadas em IA e SWARM para permitir que um único operador controle efetivamente uma equipe de drones com várias cargas úteis e habilidades com uma abordagem centrada no ser humano versus uma abordagem totalmente autônoma. 

Quais são algumas das possíveis aplicações de jogos da tecnologia XTEND?

O potencial é enorme. Hoje, se compramos um drone para voar, é praticamente inútil, e para atingir os níveis de emoção da Drone Racing League (DRL), são necessários anos de prática. Permitimos uma experiência XR “pronta para uso”, permitindo que qualquer pessoa jogue emocionantes jogos de visão em primeira pessoa da vida real sem a necessidade de se tornar proficiente na operação de um drone. Esse potencial pode permitir novos tipos de passeios em parques temáticos e novas maneiras de se divertir casualmente ao ar livre – para novas formas interativas de turismo remoto.

Existe mais alguma coisa que você gostaria de compartilhar sobre o XTEND?

O novo conceito de combinar humanos com máquinas apresenta muitas possibilidades empolgantes. Seja criando uma frota rápida de primeiros socorros em toda a cidade ou viabilizando a próxima geração de tecnologia semelhante à GoPro, o objetivo final da XTEND permanece o mesmo. Nos esforçamos para construir uma realidade onde cada um de nós possa estar em qualquer lugar, a qualquer momento, interagindo plenamente com esse ambiente remoto.

Obrigado pela entrevista, parece que pode ser uma tecnologia que pode mudar o jogo. Os leitores que desejam saber mais devem visitar EXTEND .