Bruno Zamborlin, CEO und Chief Scientist bei Hypersurfaces – Interview-Serie

Bruno Zamborlin, PhD ist ein italienischer KI-Forscher und Unternehmer mit Sitz in London, UK.

Als Gastforscher an der Goldsmiths University hat Bruno das Konzept entwickelt, physische Objekte in berührungsempfindliche, interaktive Oberflächen zu verwandeln, indem er Vibrationsensoren und künstliche Intelligenz verwendet.

Er ist der Gründer von Mogees Limited, einem in London-Los Angeles ansässigen Start-up, dessen Produkte es Benutzern ermöglichen, alltägliche Objekte in musikalische Instrumente und Spiele zu verwandeln, indem sie einen Vibrationsensor und ein Mobiltelefon verwenden (mehr als 100.000 Einheiten weltweit verkauft).

Er hat kürzlich HyperSurfaces gegründet, eine Technologieplattform, die Objekte aus jedem Material, jeder Form und Größe in datenaktivierte, interaktive Oberflächen verwandelt, indem sie nur einen Vibrationsensor und einen chipgroßen Chip verwendet.

<Ihre Reise als Unternehmer entwickelte sich aus Ihrer Leidenschaft für Musik. Könnten Sie die Geschichte erzählen, wie Sie auf das Konzept Ihres ersten Start-ups Mogees kamen?

Ich bin immer von der Idee fasziniert gewesen, Technologien zu entwickeln, die ortspezifisch sind und in der Lage sind, die Umgebung um uns herum zu nutzen und zu verändern, anstatt etwas von Grund auf zu erstellen. Ich tue dies oft mithilfe von “Interaktiver Machine Learning”, einem Zweig der KI, der sich auf die Ermöglichung für den Endbenutzer konzentriert, die Algorithmen selbst nach Belieben zu programmieren, anstatt KI als Blackbox mit festen Regeln zu verwenden. Dies ist der gemeinsame Nenner in den meisten meiner Arbeiten.

Mogees zielt darauf ab, diesen Prozess für die Klangbildung zu demokratisieren. Es ermöglicht es jedem, die akustischen Eigenschaften physischer Objekte in unserer Umgebung zu verändern, um sie musikalisch zu machen. Es besteht aus einem winzigen Vibrationsensor, den man auf das Objekt legt, das man spielen möchte, und einer Smartphone-App, die die Vibrationen in musikalische Klänge umwandelt. Die App ermöglicht es Benutzern, die akustischen Parameter des physischen Objekts, das sie spielen, zu verändern, sowie bestimmte Gesten zu erkennen. Jeder, von professionellen Performern bis hin zu Grundschulkindern, kann die Welt um sich herum so umprogrammieren, dass sie klingt, wie sie es möchten.

<Könnten Sie die Entstehungsgeschichte hinter Ihrem zweiten Start-up Hypersurfaces erzählen?

Die Technologie hat viele Aspekte unseres Lebens revolutioniert, von der Art und Weise, wie wir miteinander kommunizieren, bis hin zur Art und Weise, wie wir einkaufen, fahren, lernen und so weiter.

Die physische Welt um uns herum hat sich jedoch nicht im gleichen Maße entwickelt. Denken Sie an Ihren Küchentisch, ein Klassenzimmer, einen Park; sie sind immer noch ziemlich gleich wie vor 30 Jahren.

HyperSurfaces ist eine Technologie, die jede Oberfläche aus jedem Material, jeder Form und Größe in eine datenaktivierte HyperOberfläche verwandeln kann, die in der Lage ist, jedes Ereignis zu verstehen, das auf ihrer Oberfläche passiert, und entsprechend zu reagieren. Sie tut dies mithilfe eines winzigen Vibrationsensors und eines Chips, auf dem ein KI-Algorithmus lokal ausgeführt wird. Denken Sie an Oberflächen, die es wissen, wenn sie berührt, gewischt, bewegt oder getroffen werden, und entsprechend reagieren.

Und noch mehr, mit unserer Cloud-Plattform können Benutzer solche Oberflächen in weniger als einer Stunde selbst programmieren, ohne eine einzige Zeile Code schreiben zu müssen. HyperSurfaces ist irgendwie eine natürliche Erweiterung von Mogees. Es gibt einige Gemeinsamkeiten, nämlich Interaktiver Machine Learning und Vibrationen, obwohl diese auf das nächste Level gehoben werden.

<Worum ist es so wichtig, verschiedene Oberflächen so zu gestalten, dass sie auf menschliche Gesten reagieren?

Wenn Sie über die Art nachdenken, wie unsere Körper gestaltet sind, ist es wirklich unnatürlich, den ganzen Tag vor einem Touchscreen oder einer Tastatur zu verbringen und mit Technologien nur mit unseren Fingern zu kommunizieren. Stellen Sie sich vor, wenn Technologie überall um uns herum vorhanden sein könnte, um unsere Interaktionen mit der realen Welt zu vereinfachen. Stellen Sie sich vor, ein Boden, der weiß, wenn jemand fällt und den Sprachassistenten anweist, zu fragen, ob er einen Notruf tätigen soll, oder ein Fenster, das weiß, wenn jemand einbricht, eine Küche, die die Kochaktionen verfolgt (Töpfe platzieren, mischen, Wasser kochen usw.) und die Geräte entsprechend steuert, usw. Oder die Stadt der Zukunft, die in der Lage ist, Fahrzeuge und Fußgänger zu überwachen, ohne invasive Kameras und Mikrofone einsetzen zu müssen. Jetzt skalieren Sie dies auf einen ganzen Wald, mit solarbetriebenen Hyper-Bäumen, die kommunizieren können, wenn es einen Waldbrand oder Wilderei gibt usw. Bis hin zu künstlerischen Anwendungen wie Bäumen in einem Park, die sich je nachdem, wie viele Menschen sie an diesem Tag umarmt haben, unterschiedlich hervorheben. Die Beispiele sind endlos.

<Könnten Sie die maschinelle Lernalgorithmen erläutern, die verwendet werden, um Vibrationsmuster wie menschliche Gesten sofort zu interpretieren und in digitale Befehle umzuwandeln?

Wir verwenden Standard-Hardware zu günstigen Preisen: einen winzigen Vibrationsensor und einen Chip, den Ersteller auf oder unter die Oberfläche legen können, die sie gestalten möchten. Wenn ein Ereignis auf einer solchen Oberfläche passiert, wird die entsprechende Vibration erfasst und an den Chip gesendet, wo unser Algorithmus sie interpretiert. Wenn sie einem der Ereignisse entspricht, mit denen der Algorithmus vorab trainiert wurde, wird eine entsprechende Nachricht generiert. Solche Nachrichten können entweder lokal verwendet werden, zum Beispiel, wenn sie mit dem zentralen System eines Fahrzeugs, eines intelligenten Assistenten oder eines Raspberry Pi usw. verbunden sind, oder in die Cloud gesendet werden.

Designer können unsere Cloud-basierte Plattform verwenden, um beliebig viele Ereignisse zu definieren, die sie wünschen; die Plattform generiert automatisch die Firmware, die dann auf den Chip geladen wird, ohne dass eine einzige Zeile Code geschrieben werden muss.

<Was sind einige Anwendungsfälle für diese Technologie im Einzelhandel?

Trotz der aktuellen Situation gibt es viel Aufmerksamkeit für die Zukunft des Einzelhandels. Sie muss irgendwie anders sein als der E-Commerce, um ein wirkliches Erlebnis bieten zu können.

Designer haben mit HyperSurfaces experimentiert, um interaktive Produkte zu erstellen, die digitale Inhalte anzeigen, wenn Besucher mit einem bestimmten Produkt interagieren, und sowohl ein physisches als auch ein digitales Erlebnis gleichzeitig bieten.

<HyperSurfaces könnten in verschiedenen Anwendungen verwendet werden, welche Anwendungen glauben Sie persönlich, dass sie eine hohe Wahrscheinlichkeit haben, populär zu werden?

Angesichts der aktuellen Situation gibt es viel Aufmerksamkeit für Smart-Home-Anwendungen. Wenn diese kamerafrei und mikrofonfrei sind und die Daten lokal verarbeitet werden, umso besser.

Es gibt jedoch viele andere Anwendungen, die wir sehr bald sehen werden.

<Was für Arten von Daten können von HyperSurfaces gesammelt werden?

Ziemlich viel. Wir können sie in drei breite Kategorien einteilen: menschliche Interaktionen (wie das Berühren von etwas), akustische Ereignisse (wie das Kochen von Wasser) und Fehlerverhütung (wie das Erkennen des Sounds eines Motors, bevor er kaputt geht). Für jede dieser Kategorien kann HyperSurfaces mehrere Eigenschaften gleichzeitig erkennen, von der Intensität des Ereignisses bis zum Typ des Materials, das verwendet wird, um die Interaktion auszulösen, und vieles mehr.

<Wie können KI-Modelle diese Daten verwenden, um bestimmte Ereignisse in Echtzeit zu erkennen, während sie passieren?

Wir haben ein wirkliches “Universum” von Vibrationsereignissen entwickelt, die über Hunderte von Oberflächen aller Art aufgezeichnet wurden. Vibrationen sind eine unglaublich reiche Art von Informationen, mit denen man arbeiten kann.

Wenn Benutzer unsere Plattform verwenden, können sie eine unglaublich kleine Menge an Beobachtungen für jedes Ereignis aufzeichnen, das sie definieren möchten, weil unser KI-Algorithmus so viel Information aus ihnen extrahieren kann, dank dieses “Universums”, das wir aufgebaut haben.

<Schließlich könnten Sie uns erzählen, warum Sie sich entschieden, Informatik zu studieren?

Ich bin seit meinem 4. Lebensjahr von Mathematik fasziniert. Für mich ist Mathematik das wichtigste Werkzeug, um die Welt, in der wir leben, zu beschreiben, frei von den Vorurteilen, die die Sprache mit sich bringt. Als ich meinen ersten Computer kaufte, erfuhr ich, dass es durch Informatik möglich war, Mathematik zu verwenden, um diese Welt auf verschiedene Weise zu verändern. Ich sehe Sensoren als ein Paar Augen, um zu erfassen, was in der Welt ist, und Algorithmen wie einen Pinsel, der etwas Neues aus ihr extrahiert.

<Vielen Dank für das großartige Interview, Leser, die mehr erfahren möchten, sollten HyperSurfaces besuchen.