Bruno Zamborlin, CEO und Chief Scientist bei HyperSurfaces – Interview-Serie

Bruno Zamborlin, PhD, ist ein italienischer KI-Forscher und Unternehmer mit Sitz in London, UK.

Als Gastforscher an der Goldsmiths University hat Bruno das Konzept entwickelt, physische Objekte in berührungsempfindliche, interaktive Oberflächen zu verwandeln, indem er Vibrationssensoren und künstliche Intelligenz verwendet.

Er ist der Gründer von Mogees Limited, einem in London und Los Angeles ansässigen Start-up, dessen Produkte es Benutzern ermöglichen, alltägliche Objekte in Musikinstrumente und Spiele zu verwandeln, indem sie einen Vibrationssensor und ein Mobiltelefon verwenden (mehr als 100.000 Einheiten weltweit verkauft).

Er hat kürzlich HyperSurfaces gegründet, eine Technologieplattform, die Objekte aus jedem Material, jeder Form und Größe in datenaktivierte, interaktive Oberflächen verwandelt, indem sie nur einen Vibrationssensor und einen chipgroßen Chip verwendet.

Ihre Reise als Unternehmer hat sich aus Ihrer Leidenschaft für Musik entwickelt. Können Sie die Geschichte erzählen, wie Sie auf das Konzept Ihres ersten Start-ups Mogees kamen?

Ich habe mich immer für die Idee begeistert, Technologien zu entwickeln, die ortspezifisch sind und in der Lage sind, die Umgebung um uns herum zu nutzen und zu verändern, anstatt etwas von Grund auf zu erstellen. Ich tue dies oft mithilfe von “Interaktiver Maschineller Lerntheorie”, einem Zweig der KI, der es dem Endbenutzer ermöglicht, die Algorithmen selbst zu programmieren, wie er es möchte, anstatt die KI als Blackbox mit festen Regeln zu verwenden. Dies ist der gemeinsame Nenner in den meisten meiner Arbeiten.

Mogees zielt darauf ab, diesen Prozess für die Klangschöpfung zu demokratisieren. Es ermöglicht es jedem, die akustischen Eigenschaften von physischen Objekten in seiner Umgebung zu verändern, um sie musikalisch zu machen. Es besteht aus einem winzigen Vibrationssensor, den man auf das Objekt legt, das man spielen möchte, und einer Smartphone-App, die die Vibrationen in musikalischen Klang umwandelt. Die App ermöglicht es Benutzern, die akustischen Parameter des physischen Objekts, das sie spielen, zu verändern, sowie bestimmte Gesten zu erkennen. Jeder, von professionellen Performern bis hin zu Grundschulkindern, kann die Welt um sich herum so umprogrammieren, dass sie klingt, wie er es möchte.

Können Sie die Entstehungsgeschichte hinter Ihrem zweiten Start-up HyperSurfaces erzählen?

Die Technologie hat viele Aspekte unseres Lebens revolutioniert, von der Art und Weise, wie wir miteinander kommunizieren, bis hin zur Art und Weise, wie wir einkaufen, fahren, lernen usw.

Die physische Welt um uns herum hat sich jedoch nicht im gleichen Maße entwickelt. Denken Sie an Ihren Küchentisch, einen Schulunterrichtsraum, einen Park; sie sind immer noch ziemlich gleich wie vor 30 Jahren.

HyperSurfaces ist eine Technologie, die jede Oberfläche aus jedem Material, jeder Form und Größe in eine datenaktivierte HyperOberfläche verwandeln kann, die in der Lage ist, jedes Ereignis zu verstehen, das auf ihrer Oberfläche passiert, und entsprechend zu reagieren. Dies geschieht mithilfe eines winzigen Vibrationssensors und eines Chips, auf dem ein KI-Algorithmus lokal ausgeführt wird. Denken Sie an Oberflächen, die erkennen, wenn sie berührt, gewischt, bewegt oder getroffen werden, und entsprechend reagieren.

Und noch mehr: Mit unserer Cloud-Plattform können Benutzer solche Oberflächen innerhalb weniger als einer Stunde selbst programmieren, ohne eine einzige Zeile Code schreiben zu müssen. HyperSurfaces ist irgendwie eine natürliche Erweiterung von Mogees. Es gibt einige Gemeinsamkeiten, nämlich Interaktive Maschinelle Lerntheorie und Vibrationen, obwohl diese auf das nächste Level gehoben werden.

Warum ist es so wichtig, verschiedene Oberflächen so zu gestalten, dass sie auf menschliche Gesten reagieren?

Wenn man über die Art und Weise nachdenkt, wie unsere Körper konzipiert sind, ist es wirklich unnatürlich, den ganzen Tag vor einem Touchscreen oder einer Tastatur zu verbringen und Technologien nur mit unseren Fingern zu bedienen. Stellen Sie sich vor, wenn Technologie überall um uns herum vorhanden wäre, um unsere Interaktionen mit der realen Welt zu vereinfachen. Stellen Sie sich einen Boden vor, der erkennt, wenn jemand fällt, und den Sprachassistenten anweist, zu fragen, ob er einen Notruf tätigen soll, oder ein Fenster, das erkennt, wenn jemand einbricht, eine Küche, die Ihre Kochaktionen verfolgt (Töpfe platzieren, mischen, Wasser kochen usw.) und entsprechend die Geräte steuert usw. Oder die Stadt der Zukunft, die in der Lage ist, Fahrzeuge und Fußgänger zu überwachen, ohne invasive Kameras und Mikrofone einsetzen zu müssen. Skalieren Sie dies auf einen ganzen Wald, mit solarbetriebenen Hyper-Bäumen, die kommunizieren können, wenn es ein Feuer oder Wilderei gibt usw. Bis hin zu künstlerischen Anwendungen wie Bäumen in einem Park, die sich je nachdem, wie viele Menschen sie an diesem Tag umarmt haben, unterschiedlich hervorheben. Die Beispiele sind endlos.

Können Sie die maschinelle Lern-Technologie erläutern, die verwendet wird, um Vibrationsmuster wie menschliche Gesten sofort zu interpretieren und in digitale Befehle umzuwandeln?

Wir verwenden Standard-Hardware: einen chipgroßen Vibrationssensor und einen Chip, den Ersteller auf oder unter die Oberfläche legen können, die sie verändern möchten. Wenn ein Ereignis auf einer solchen Oberfläche auftritt, wird die entsprechende Vibration erfasst und an den Chip gesendet, wo unser Algorithmus sie interpretiert. Wenn sie einem der Ereignisse entspricht, mit denen der Algorithmus vorab trainiert wurde, wird eine entsprechende Nachricht generiert. Solche Nachrichten können entweder lokal verwendet werden, beispielsweise wenn sie mit dem zentralen System eines Fahrzeugs, einem intelligenten Assistenten oder einem Raspberry Pi usw. verbunden sind, oder an die Cloud gesendet werden.

Designer können unsere Cloud-basierte Plattform verwenden, um beliebig viele Ereignisse zu definieren, die sie wünschen; die Plattform generiert automatisch die Firmware, die dann auf den Chip geladen wird, ohne dass eine einzige Zeile Code geschrieben werden muss.

Was sind einige Anwendungsfälle für diese Technologie im Einzelhandel?

Trotz der aktuellen Situation gibt es viel Aufmerksamkeit für die Zukunft des Einzelhandels. Er muss irgendwie anders sein als der E-Commerce, um ein wirkliches Erlebnis zu bieten.

Designer haben mit HyperSurfaces experimentiert, um interaktive Produkte zu erstellen, die digitale Inhalte anzeigen, je nachdem, wie Besucher mit einem bestimmten Produkt interagieren, und sowohl ein physisches als auch ein digitales Erlebnis zur gleichen Zeit bieten.

HyperSurfaces könnten in verschiedenen Anwendungen verwendet werden, welche Anwendungen glauben Sie persönlich, dass sie eine hohe Wahrscheinlichkeit haben, populär zu werden?

Angesichts der aktuellen Situation gibt es viel Aufmerksamkeit für Smart-Home-Anwendungen. Wenn diese frei von Kameras und Mikrofonen sind und die Daten lokal verarbeitet werden, umso besser.

Es gibt jedoch viele andere Anwendungen, die wir sehr bald sehen werden.

Welche Art von Daten kann von HyperSurfaces gesammelt werden?

Sehr viel. Wir können sie in drei breite Kategorien einteilen: menschliche Interaktionen (wie Berühren), akustische Ereignisse (wie das Kochen von Wasser) und Fehlerverhütung (wie das Erkennen des Sounds eines Motors, bevor er kaputt geht). Für jede dieser Kategorien kann HyperSurfaces mehrere Eigenschaften gleichzeitig erkennen, von der Intensität des Ereignisses bis hin zum Typ des Materials, das verwendet wird, um die Interaktion auszulösen, und vieles mehr.

Wie können KI-Modelle diese Daten verwenden, um spezifische Ereignisse in Echtzeit zu erkennen, während sie passieren?

Wir haben ein echtes “Universum” von Vibrationsereignissen entwickelt, die über Hunderte von Oberflächen aller Art aufgezeichnet wurden. Vibrationen sind eine unglaublich reiche Informationsquelle, mit der man arbeiten kann.

Wenn Benutzer unsere Plattform verwenden, können sie eine unglaublich kleine Menge an Beobachtungen für jedes Ereignis aufzeichnen, das sie definieren möchten, da unsere KI in der Lage ist, so viel Information aus ihnen zu extrahieren, dank des “Universums”, das wir aufgebaut haben.

Schließlich, können Sie uns sagen, warum Sie sich für das Studium der Informatik entschieden haben?

Ich bin seit meinem 4. Lebensjahr von der Mathematik fasziniert. Für mich ist sie das wichtigste Werkzeug, um die Welt, in der wir leben, zu beschreiben, frei von den Vorurteilen, die die Sprache mit sich bringt. Als ich meinen ersten Computer kaufte, lernte ich, dass es durch die Informatik möglich war, die Welt zu verändern, indem man Mathematik verwendet. Ich sehe Sensoren als ein Paar Augen, die erfassen, was in der Welt ist, und Algorithmen wie einen Pinsel, der etwas Neues aus ihr extrahiert.

Vielen Dank für das großartige Interview. Leser, die mehr erfahren möchten, sollten HyperSurfaces besuchen.