Bruno Zamborlin, VD och chefsforskare på Hypersurfaces – Intervju-serie

Bruno Zamborlin, PhD är en italiensk AI-forskare och entreprenör bosatt i London, Storbritannien.

Som gästforskare vid Goldsmiths University var Bruno en pionjär inom konceptet att omvandla fysiska föremål till beröringskänsliga, interaktiva ytor med hjälp av vibrationsensorer och artificiell intelligens.

Han är grundare av Mogees Limited, det London-Los Angeles-baserade startup-företaget vars produkter möjliggör för användare att omvandla vardagsföremål till musikinstrument och spel med hjälp av en vibrationsensor och en mobiltelefon (mer än 100 000 enheter sålda världen över).

Han har nyligen grundat HyperSurfaces, en teknologiplattform som omvandlar föremål av alla material, former och storlekar till dataaktiverade, interaktiva ytor med hjälp av en vibrationsensor och en myntstor chipset.

Hur började din resa som entreprenör, och hur kom du på idén till ditt första företag Mogees?

Jag har alltid varit passionerad av idén att skapa teknologier som är platspecifika, kapabla att utnyttja och förändra omgivningarna runt oss, snarare än att skapa något från scratch. Jag använder ofta “Interaktiv maskinlärande”, som är en gren av AI som fokuserar på att möjliggöra för slutanvändaren att programmera algoritmerna själv, snarare än att använda AI som en svart låda med fördefinierade regler. Det har varit den gemensamma grunden i mycket av mitt arbete.

Mogees syftar till att demokratisera denna process för ljudskapande. Det möjliggör för vem som helst att förändra akustiska egenskaper hos fysiska föremål runt omkring oss för att göra dem musikaliska. Det består av en liten vibrationsensor som du placerar på föremålet du vill spela och en smartphone-app som omvandlar vibrationerna till musikaliska ljud. Appen möjliggör för användare att förändra de akustiska parametrarna för det fysiska föremålet du spelar, samt att känna igen specifika gester. Vem som helst, från professionella artister till skolbarn, kan omprogrammera världen runt omkring sig för att göra den låta som de vill.

Kan du diskutera ursprunget till din andra startup, Hypersurfaces?

Teknologi har revolutionerat många aspekter av våra liv, från hur vi kommunicerar med varandra till hur vi handlar, kör, studerar och så vidare.

Den fysiska världen runt omkring oss har dock inte utvecklats i samma takt. Tänk på ditt köksbord, en skolklass, en park; de är fortfarande ganska lika som för 30 år sedan.

HyperSurfaces är en teknologi som kan omvandla vilken yta som helst, oavsett material, form och storlek, till en dataaktiverad HyperYta, kapabel att förstå vilket som helst händelse som inträffar på dess yta och reagera därefter, vid rätt tidpunkt. Det gör det tack vare en liten vibrationsensor och en chipset där en AI-algoritm körs lokalt. Tänk på ytor som är medvetna om när de berörs, svepas, flyttas, slås, när en vätska droppas på dem, etc. och reagerar på sådana händelser enligt.

Och ännu mer, med vår molnplattform kan användare programmera sådana ytor själva på mindre än en timme, utan att behöva skriva en enda rad kod. HyperSurfaces är på något sätt en naturlig utvidgning av Mogees. Det finns vissa likheter, nämligen Interaktiv maskinlärande och vibrationer, även om dessa tas till nästa nivå.

Varför är det så viktigt att förstärka olika ytor för att svara på mänskliga gester?

Om du tänker på hur våra kroppar är utformade, är det verkligen onaturligt att tillbringa hela dagen framför en pekskärm eller ett tangentbord och kommunicera med teknologi med bara fingrarna. Tänk om teknologi kunde spridas överallt runt omkring oss för att förenkla våra interaktioner med den verkliga världen. Tänk på en golv som vet när någon faller och får röstassistenten att fråga om du vill ringa en nödsituation, eller ett fönster som vet om någon bryter in, ett kök som spårar dina matlagningssådd (sätter kastruller, blandar, vatten kokar, etc.) och kontrollerar apparater enligt. Eller den framtida staden, som kan övervaka fordon och fotgängare utan att behöva använda invasiva kameror och mikrofoner. Nu skala detta till en hel skog, med solcellsdrevna hyperträd som kan kommunicera när det finns en brand, eller tjuvjakt, etc. Till mycket mer konstnärliga tillämpningar, som träd i en park som lyser upp sig olika beroende på hur många som omfamnade dem den dagen. Exemplen är oändliga.

Kan du förklara maskinlärandeteknologin som används för att direkt tolka vibrationsmönster, såsom mänskliga gester, och omvandla dem till digitala kommandon?

Vi använder standardiserad, billig hårdvara: en myntstor vibrationsensor och en chipset, som skapare kan placera på eller under ytan de vill förstärka. När en händelse inträffar på en sådan yta, fångas vibrationen och skickas till chipset, där vår algoritm tolkar den. Om den motsvarar en av de händelser som algoritmen har förutbildats med, genereras en motsvarande meddelande. Sådana meddelanden kan användas antingen lokalt, till exempel när de är anslutna till ett centralsystem i ett fordon, eller en smart assistent, eller en Raspberry Pi, etc., eller skickas till molnet.

Designers kan använda vår molnbaserade plattform för att definiera vilka händelser de vill; plattformen genererar automatiskt firmware som sedan laddas ner till chipset, ingen enda rad kod behöver skrivas.

Vilka är några användningsfall för denna teknologi inom detaljhandeln?

Trots den nuvarande situationen finns det mycket uppmärksamhet kring detaljhandelns framtid just nu. Den behöver vara något annorlunda än e-handel, kapabel att erbjuda en riktig upplevelse.

Designers har experimenterat med HyperSurfaces för att skapa interaktiva produkter som visar digitalt innehåll enligt hur besökare interagerar med en viss produkt, och erbjuder både en fysisk och digital upplevelse samtidigt.

HyperSurfaces kan användas i olika tillämpningar, vilka är några av de tillämpningar som du personligen tror har en hög möjlighet att bli populära?

Med tanke på den nuvarande situationen finns det mycket uppmärksamhet kring smarta hemtillämpningar. Om de är fria från kameror och mikrofoner, och data bearbetas lokalt, då är det ännu bättre.

Men det finns många andra tillämpningar som vi kommer att se mycket snart.

Vilken typ av data kan samlas in från hypersurfaces?

Ganska mycket. Vi kan dela in dem i tre breda kategorier: mänskliga interaktioner (som att röra vid något), akustiska händelser (som vatten som kokar) och felavhjälpning (som att upptäcka ljudet från en motor innan den går sönder). För var och en av dessa kategorier är HyperSurfaces kapabel att berätta flera egenskaper samtidigt, från händelsens intensitet till typen av material som används för att provocera interaktionen, och mycket mer.

Hur kan AI-modeller använda denna data för att upptäcka specifika händelser allteftersom de inträffar i realtid?

Vi har utvecklat en riktig “värld” av vibrationshändelser som registrerats över hundratals ytor av alla slag. Vibrationer är en otroligt rik typ av information att arbeta med.

När användare använder vår plattform kan de registrera en otroligt liten mängd observationer för varje händelse de vill definiera, eftersom vår AI är kapabel att extrahera så mycket information från dem tack vare denna “värld” vi byggt.

Till sist, kan du berätta varför du valde att studera datavetenskap?

Jag har alltid varit fascinerad av matematik sedan jag var 4. För mig är det det främsta verktyget för att beskriva världen vi lever i, fritt från de fördomar som språk medför. När jag köpte min första dator lärde jag mig att det genom datavetenskap var möjligt att använda matematik för att modifiera en sådan värld på olika sätt. Jag ser sensorer som ett par ögon som fångar vad som finns i världen och algoritmer som en pensel som extraherar något nytt från den.

Tack för den underbara intervjun, läsare som vill lära sig mer bör besöka HyperSurfaces.