Bruno Zamborlin, CEO i Główny Naukowiec w HyperSurfaces – Wywiad

Bruno Zamborlin, PhD jest włoskim badaczem sztucznej inteligencji i przedsiębiorcą z siedzibą w Londynie, Wielka Brytania.

Jako visiting researcher na Goldsmiths University, Bruno był pionierem w dziedzinie przekształcania fizycznych obiektów w powierzchnie wrażliwe na dotyk i interakcje za pomocą czujników drgań i sztucznej inteligencji.

Jest założycielem Mogees Limited, londyńsko-losangeleskiego startupu, którego produkty umożliwiają użytkownikom przekształcanie codziennych obiektów w instrumenty muzyczne i gry za pomocą czujnika drgań i telefonu komórkowego (ponad 100 000 sztuk sprzedanych na całym świecie).

Ostatnio założył HyperSurfaces, platformę technologiczną, która przekształca obiekty dowolnego materiału, kształtu i rozmiaru w powierzchnie interaktywne i wzbogacone danymi, wykorzystując tylko czujnik drgań i chipset o wielkości monety.

Jaka była Twoja droga jako przedsiębiorca, która ewoluowała z Twojej pasji do muzyki? Czy mógłbyś podzielić się historią, jak powstał pomysł na Twoją pierwszą firmę, Mogees?

Zawsze byłem pasjonowany ideą tworzenia technologii, które są specyficzne dla miejsca, zdolne do wykorzystania i modyfikacji otoczenia wokół nas, zamiast tworzenia czegoś od podstaw. Często robię to za pomocą “Interaktywnego Uczenia Maszynowego”, który jest gałęzią sztucznej inteligencji, koncentrującą się na umożliwieniu użytkownikom końcowym programowania algorytmów według ich uznania, zamiast używania sztucznej inteligencji jako czarnej skrzynki z zaprogramowanymi zasadami. Było to wspólne podłoże większości mojej pracy.

Mogees ma na celu udemokratyzowanie tego procesu dla tworzenia dźwięku. Skutecznie umożliwia każdemu modyfikację właściwości akustycznych fizycznych obiektów wokół nas, aby uczynić je muzycznymi. Składa się z małego czujnika drgań, który umieszcza się na obiekcie, który chcesz zagrać, oraz aplikacji na telefon komórkowy, która przekształca drgania w dźwięk muzyczny. Aplikacja umożliwia użytkownikom modyfikację parametrów akustycznych fizycznego obiektu, który grają, a także rozpoznaje określone gesty. Każdy, od profesjonalnych wykonawców po dzieci ze szkoły podstawowej, może przeprogramować świat wokół siebie, aby brzmiał tak, jak sobie życzą.

Czy mógłbyś opowiedzieć o historii powstania Twojej drugiej firmy, HyperSurfaces?

Technologia rewolucjonizowała wiele aspektów naszego życia, od sposobu, w jaki komunikujemy się z innymi, po sposób, w jaki robimy zakupy, prowadzimy samochód, uczymy się itd.

Świat fizyczny wokół nas jednak nie ewoluował w tym samym tempie. Pomyśl o swoim stole kuchennym, sali lekcyjnej, parku; nadal są one bardzo podobne do tych z 30 lat temu.

HyperSurfaces to technologia, która może przekształcić dowolną powierzchnię zrobioną z dowolnego materiału, kształtu i rozmiaru w powierzchnię wzbogaconą danymi, zdolną do zrozumienia każdego zdarzenia, które występuje na jej powierzchni, i reagowania na nie odpowiednio, we właściwym czasie. Robi to za pomocą małego czujnika drgań i chipsetu, na którym działa algorytm sztucznej inteligencji. Pomyśl o powierzchniach, które są świadome, kiedy są dotykane, przesuwane, przenoszone, uderzane, kiedy na nich coś upuszcza się, itd. i reagują na takie zdarzenia odpowiednio.

I co więcej, dzięki naszej platformie w chmurze użytkownicy mogą samodzielnie programować takie powierzchnie w czasie krótszym niż godzina, bez konieczności pisania jednej linii kodu. HyperSurfaces jest w jakiś sposób naturalnym rozszerzeniem Mogees. Istnieją pewne podobieństwa, a mianowicie Interaktywne Uczenie Maszynowe i drgania, chociaż są one podniesione do następnego poziomu.

Dlaczego tak ważne jest wzbogacanie różnych powierzchni, aby reagowały na gesty ludzkie?

Jeśli pomyślisz o tym, jak nasze ciała są zaprojektowane, to naprawdę nienaturalne jest spędzanie całego dnia przed ekranem dotykowym lub klawiaturą, komunikując się z technologiami tylko palcami. Wyobraź sobie, że technologia mogłaby być rozpowszechniona wszechobecnie wokół nas, aby uprościć nasze interakcje ze światem rzeczywistym. Wyobraź sobie podłogę, która wie, kiedy ktoś upadnie i poprosi asystenta głosowego, czy okno, które wie, kiedy ktoś się włamuje, kuchnię, która śledzi Twoje działania gotowania (umieszczanie garnków, mieszanie, wrzenie wody itd.) i kontroluje urządzenia odpowiednio, itd. Albo miasto przyszłości, które może monitorować pojazdy i pieszych bez konieczności stosowania inwazyjnych kamer i mikrofonów. Teraz skaluj to do całego lasu, z drzewami zasilanymi energią słoneczną, które mogą komunikować, kiedy jest pożar, lub kradzież, itd. Do znacznie bardziej artystycznych zastosowań, takich jak drzewa w parku, które podświetlają się inaczej w zależności od ilości ludzi, którzy ich dotknęli tego dnia. Przykłady są nieograniczone.

Czy mógłbyś wyjaśnić technologię sztucznej inteligencji, która jest używana do natychmiastowego interpretowania wzorców drgań, takich jak gesty ludzkie, i konwertowania ich w dowolne polecenie cyfrowe?

Używamy standardowego, taniego sprzętu: czujnika drgań o wielkości monety i chipsetu, który twórcy mogą umieścić na lub pod powierzchnią, którą chcą wzbogacić. Kiedy zdarzenie występuje na takiej powierzchni, odpowiednie drgania są przechwytywane i wysyłane do chipsetu, gdzie nasz algorytm je interpretuje. Jeśli odpowiadają one jednej z zdarzeń, z którymi algorytm został wcześniej przeszkolony, generowany jest odpowiedni komunikat. Takie komunikaty mogą być używane lokalnie, na przykład połączone z systemem centralnym pojazdu, asystentem lub ad-hoc Raspberry Pi, itd., lub wysłane do chmury.

Projektanci mogą używać naszej platformy w chmurze, aby zdefiniować dowolną liczbę zdarzeń, które chcą; platforma automatycznie generuje oprogramowanie układowe, które jest następnie ładowane na chipset, nie ma potrzeby pisania jednej linii kodu.

Jakie są niektóre zastosowania tej technologii w przestrzeni detalicznej?

Pomimo obecnej sytuacji, wiele uwagi poświęca się przyszłości handlu detalicznego. Musi on być w jakiś sposób inny niż handel elektroniczny, zdolny do oferowania prawdziwego doświadczenia.

Projektanci eksperymentowali z HyperSurfaces, aby stworzyć produkty interaktywne, które wyświetlają treści cyfrowe w zależności od tego, jak odwiedzający wchodzą w interakcje z określonym produktem, oferując zarówno doświadczenie fizyczne, jak i cyfrowe jednocześnie.

HyperSurfaces mogą być używane w różnych aplikacjach, które z nich, według Ciebie, mają wysokie prawdopodobieństwo stać się popularne?

Biorąc pod uwagę obecną sytuację, wiele uwagi poświęca się aplikacjom smart home. Jeśli są one wolne od kamer i mikrofonów, a dane są przetwarzane lokalnie, to jeszcze lepiej.

Ale istnieją wiele innych aplikacji, które będziemy widzieć bardzo szybko.

Jakiego rodzaju dane mogą być zbierane z HyperSurfaces?

Bardzo wiele. Możemy je podzielić na trzy szerokie kategorie: interakcje ludzkie (takie jak dotykanie czegoś), zdarzenia akustyczne (takie jak wrzenie wody) i zapobieganie awariom (takie jak wykrywanie dźwięku silnika przed awarią). Dla każdej z tych kategorii HyperSurfaces jest w stanie powiedzieć wiele właściwości jednocześnie, od intensywności zdarzenia do rodzaju materiału użytego do wywołania interakcji, i wiele więcej.

Jak modele sztucznej inteligencji mogą używać tych danych, aby wykryć określone zdarzenia w czasie rzeczywistym?

Stworzyliśmy prawdziwy “wszechświat” zdarzeń drgań zarejestrowanych na setkach powierzchni wszystkich rodzajów. Drgania są niezwykle bogatym typem informacji do pracy.

Kiedy używamy naszej platformy, użytkownicy mogą zarejestrować niezwykle małą ilość obserwacji dla każdego zdarzenia, które chcą zdefiniować, ponieważ nasza sztuczna inteligencja jest w stanie wydobyć wiele informacji z nich dzięki temu “wszechświatowi”, który zbudowaliśmy.

Na koniec, czy mógłbyś powiedzieć, dlaczego wybrałeś studia z informatyki?

Od kiedy miałem 4 lata, jestem fascynowany matematyką. Dla mnie jest to główne narzędzie do opisu świata, w którym żyjemy, wolne od uprzedzeń, jakie niesie ze sobą język. Kiedy kupiłem swój pierwszy komputer, nauczyłem się, że dzięki informatyce można było używać matematyki do modyfikacji takiego świata na różne sposoby. Widzę czujniki jako parę oczu, które przechwytują to, co jest w świecie, i algorytmy jak pędzel, który wydobywa coś nowego z niego.

Dziękujemy za wspaniały wywiad, czytelnicy, którzy chcą dowiedzieć się więcej, powinni odwiedzić HyperSurfaces.