Bruno Zamborlin, VD och chefsforskare på Hypersurfaces – Intervjuer

Bruno Zamborlin, PhD är en italiensk AI-forskare och entreprenör baserad i London, Storbritannien.

Som gästforskare vid Goldsmiths University banade Bruno väg för konceptet att förvandla fysiska föremål till beröringskänsliga, interaktiva ytor med hjälp av vibrationsensorer och artificiell intelligens.

Han är grundare av Mogees Limited, det London-Los Angeles-baserade startup-företaget vars produkter möjliggör för användare att förvandla vardagsföremål till musikinstrument och spel med hjälp av en vibrationsensor och en mobiltelefon (mer än 100 000 enheter sålda världen över).

Han har nyligen grundat HyperSurfaces, en teknikplattform som omvandlar föremål av alla material, former och storlekar till dataaktiverade, interaktiva ytor med hjälp av en vibrationsensor och en myntstor chip.

Er resa som entreprenör utvecklades från er passion för musik. Kan ni berätta om historien om hur ni kom på konceptet för ert första startup-företag Mogees?

Jag har alltid varit passionerad om att skapa teknologier som är plats-specifika, kapabla att utnyttja och förändra miljöerna runt omkring oss i stället för att skapa något från scratch. Jag gör ofta detta med hjälp av “Interaktiv maskinlärande”, som är en gren av AI som fokuserar på att möjliggöra för slutanvändaren att programmera algoritmerna själva som de vill, i stället för att använda AI som en svart låda med fördefinierade regler. Det har varit den gemensamma grunden i de flesta av mina arbeten.

Mogees syftar till att demokratisera denna process för ljudskapande. Det möjliggör i princip för vem som helst att förändra akustiska egenskaper hos fysiska föremål runt omkring oss för att göra dem musikaliska. Det består av en liten vibrationsensor som man placerar på föremålet man vill spela och en smartphone-app, som omvandlar vibrationerna till musikaliska ljud. Appen möjliggör för användare att förändra de akustiska parametrarna för det fysiska föremålet man spelar, samt att känna igen specifika gester. Vem som helst, från professionella artister till grundskolebarn, kan omprogrammera världen runt omkring sig för att göra den låta som de vill.

Kan ni diskutera ursprunget till er andra startup-företag Hypersurfaces?

Teknologin har revolutionerat många aspekter av våra liv, från hur vi kommunicerar med varandra till hur vi handlar, kör, studerar och så vidare.

Den fysiska världen runt omkring oss har dock inte utvecklats i samma takt. Tänk på er köksbord, en skolklass, en park; de är fortfarande ganska lika som för 30 år sedan.

HyperSurfaces är en teknik som kan omvandla vilken yta som helst, tillverkad av vilket material som helst, form och storlek, till en dataaktiverad HyperYta, kapabel att förstå vilket händelse som helst som inträffar på dess yta och reagera därefter, vid rätt tidpunkt. Det gör det tack vare en liten vibrationsensor och en chip där en AI-algoritm körs lokalt. Tänk på ytor som är medvetna om när de berörs, svepas, flyttas, slås, när en vätska droppas på dem, etc. och reagerar på sådana händelser enligt.

Och ännu mer, med vår molnplattform kan användare programmera sådana ytor själva på mindre än en timme, utan att behöva skriva en enda rad kod. HyperSurfaces är på något sätt en naturlig utvidgning av Mogees. Det finns vissa likheter, nämligen Interaktiv maskinlärande och vibrationer, även om dessa tas till nästa nivå.

Varför är det så viktigt att förstärka olika ytor för att svara på mänskliga gester?

Om man tänker på hur våra kroppar är utformade, är det verkligen onaturligt att tillbringa hela dagen framför en pekskärm eller ett tangentbord och kommunicera med teknologier med bara våra fingrar. Tänk om teknologin kunde spridas överallt runt omkring oss för att förenkla vår interaktion med den verkliga världen. Tänk på en golv som vet när någon faller och får röstassistenten att fråga om man vill ringa efter en nödsituation, eller ett fönster som vet om någon bryter in, ett kök som spårar er matlagning (sätter kastruller, blandar, vatten kokar, etc.) och styr apparater därefter, etc. Eller framtiden för städer, som kan övervaka fordon och fotgängare utan att behöva använda invasiva kameror och mikrofoner. Nu skala detta till en hel skog, med solcellsdrivna hyperträd som kan kommunicera när det finns en brand, eller tjuvjakt, etc. Till mycket mer konstnärliga tillämpningar, som träd i en park som lyser upp sig olika beroende på hur många som kramat dem den dagen. Exemplen är oändliga.

Kunde ni förklara den maskinlärandeteknik som används för att direkt tolka vibrationsmönster, såsom mänskliga gester, och omvandla dem till digitala kommandon?

Vi använder standardiserad, billig hårdvara: en myntstor vibrationsensor och en chip, som skapare kan placera på eller under ytan de vill förstärka. När en händelse inträffar på en sådan yta, fångas den motsvarande vibrationen upp och skickas till chippet, där vår algoritm tolkar den. Om den motsvarar en av de händelser som algoritmen har förutbildats med, genereras ett motsvarande meddelande. Sådana meddelanden kan användas antingen lokalt, till exempel när de är anslutna till ett fordonssystem, eller en smart assistent, eller en Raspberry Pi, etc., eller skickas till molnet.

Designers kan använda vår molnbaserade plattform för att definiera vilka händelser de vill; plattformen genererar automatiskt firmware som sedan laddas ner till chippet, ingen enda rad kod behöver skrivas.

Vilka är några av användningsfallen för denna teknik i detaljhandelssektorn?

Trots den nuvarande situationen finns det mycket uppmärksamhet kring detaljhandelns framtid just nu. Den behöver vara något annorlunda än e-handel, kapabel att erbjuda en riktig upplevelse.

Designers har experimenterat med HyperSurfaces för att skapa interaktiva produkter som visar digitalt innehåll enligt hur besökare interagerar med en viss produkt, och erbjuder både en fysisk och digital upplevelse samtidigt.

HyperSurfaces kan användas i olika tillämpningar, vilka är några av de tillämpningar som ni personligen tror har en hög möjlighet att bli populära?

Med tanke på den nuvarande situationen finns det mycket uppmärksamhet kring smarta hemtillämpningar. Om de är fria från kameror och mikrofoner, och data bearbetas lokalt, så är det ännu bättre.

Men det finns många andra tillämpningar som vi kommer att se mycket snart.

Vilken typ av data kan samlas in från hypersurfaces?

Ganska mycket. Vi kan dela in dem i tre breda kategorier: mänskliga interaktioner (såsom att röra vid något), akustiska händelser (såsom vatten som kokar) och felavhjälpning (såsom att upptäcka ljudet från en motor innan den går sönder). För var och en av dessa kategorier är HyperSurfaces kapabel att berätta om många egenskaper samtidigt, från händelsens intensitet till materialet som används för att provocera interaktionen, och mycket mer.

Hur kan AI-modeller använda denna data för att upptäcka specifika händelser allteftersom de inträffar i realtid?

Vi har utvecklat en riktig “universum” av vibrationshändelser som registrerats över hundratals ytor av alla slag. Vibrationer är en otroligt rik typ av information att arbeta med.

När man använder vår plattform kan användare spela in en otroligt liten mängd observationer för varje händelse de vill definiera, eftersom vår AI är kapabel att extrahera så mycket information från dem tack vare detta “universum” vi byggt.

Till sist, kunde ni berätta om varför ni valde att studera datavetenskap?

Jag har varit fascinerad av matematik sedan jag var 4. För mig är det det främsta verktyget för att beskriva världen vi lever i, fritt från de fördomar som språk medför. När jag köpte min första dator lärde jag mig att genom datavetenskap var det möjligt att använda matematik för att förändra världen på olika sätt. Jag ser sensorer som ett par ögon för att fånga vad som finns i världen och algoritmer som en pensel som drar ut något nytt från den.

Tack för den underbara intervjun, läsare som vill lära sig mer bör besöka HyperSurfaces.