AR, XR ja aivorajapinnat

Chris Aimone, Muse:n perustaja ja teknologiajohtaja – Haastattelusarja

mm
Lisää Unite.AI suosikkilähteisiisi Google-palvelussa

Chris Aimone perusti Muse:n, jonka tavoitteena on luoda teknologiaa, joka laajentaa näkemystämme itsestämme ja maailmasta ympärillämme.

Taiteilija ja keksijä sydämessään, Chrisin luova ja suunnittelutoiminta on kattanut monia aloja, kuten arkkitehtuuri, lisätty todellisuus, tietokoneavusteinen näkeminen, musiikki ja robottiikka. Pyrkien tuomaan innovatiivisia uusia kokemuksia eloon, Chris on rakentanut asennukset Ontario Science Centreen ja osallistunut merkittäviin teknologiaan liittyviin taidaprojekteihin, jotka on esitetty ympäri maailmaa (mukaan lukien Burning Man).

Voitko kertoa, miten rakkautesi robottiikkaa ja aivokone-liittymiin (BMI) alkoi?

Kun olin hyvin nuori, en ollut kiinnostunut suosittujen lastenlelujen kanssa leikkimisestä, vaan olin kiinnostunut työkaluista – niin paljon, että lempikirjani oli itse asiassa työkalukatalogi (18 kuukauden iässä) ja toivoin joululahjaksi ompelukonetta, kun olin 3-vuotias.

Olin kiinnostunut siitä, mitä työkalut voivat tehdä – miten ne voivat laajentaa mahdollisuuksiani mahdottomiin, ja rakkauteni robottiikkaa ja BMI:hin oli vain tämän jatke. Olin niin utelias siitä, mitä layyuuksen rajojen ulottuvilla, juuri ulottuvillani, ja mitä voisin tehdä kehollani ja työkaluillani yhdessä.

En kuitenkaan aloittanut robotiikan rakentamista tai BMI:n kehittämistä, kunnes paljon myöhemmin, oletan, että se oli vain pääsykysymys. Tietokoneet eivät olleet kovin edullisia (tai lähestyttäviä) 80-luvulla. Opetin ohjelmointia Commodore 64:llä, mutta en halunnut, että luomukseti eläisivät vain tietokoneessa. Opetin kytkemään asiat rinnakkaisporttiin, mutta se oli turhauttavaa ja tylsää. Ei ollut Arduinoa, ei ollut raspberry pi:ä, ei ollut seuraavan päivän toimituksia Digikey:stä.

Paras asia, jonka rakensin silloin, oli maskeja, joissa oli tietokoneohjatut vilkkuvat valot, joita voisin sykkiä eri taajuuksilla silmiini. Olin huomannut, että havaintoni muuttui vähän outoon katsellessani vilkkuvia LED-ejä, joten olin utelias siitä, mitä tapahtuisi, jos vaikuttaisin koko näkökenttääni sillä tavalla. Ilmeisesti minulla oli latentti kiinnostus tietoisuutta ja aivokone-liittymää kohtaan. Olen todella utelias siitä, mitä olisin voinut rakentaa, jos olisin ollut päässyt käyttämään Musea tai muita nykyään saatavilla olevia teknologioita silloin!

 

Mitkä olivat ensimmäiset robotit, joilla työskentelit?

Rakensin erittäin coolin seinän kiipeävän robotin muutaman ystävän kanssa. Se oli neljä imupilliä käsissä ja iso imupatja vatsassa. Ainoa käyttö, johon pystyimme, oli itsestään toimiva ikkunanpesu. Se oli superhauska projekti, jota mahdollistivat automaatioalan toimittajat, jotka antoivat meille osia, kun soitimme heille hullulla idealla… mutta se toimi! Projekti opetti meille myös paljon sähkömagneettisesta häiriöstä ja drywallin vahvuudesta talossa.

Sen jälkeen rakensin maalausrobotin yhden kesän, joka maalasi valtavan 6×8 seinäkankaalle brushin kiinni mutantti Commodore 64 -tulostimessa. Se oli monsteri, joka käytti jokaista teknologiajätettä, jonka löysin, mukaan lukien grillipannun, tietokonemäisiä hiiriä ja vanhoja rullaluistimiini. Siinä oli webcam keskellä 90-luvulta ja yritti piirtää, mitä näki. Se oli niin absurdia… yhä kaipaan sen iloista, huumorista persoonallisuutta.

Kun tein maisterin tutkintoani, rakensin samanlaisen hullun robotin muutaman ystävän kanssa, joka oli talon kokoinen. Olimme kiinnostuneita siitä, mitä tapahtuisi, jos rakennus muuttaisi muotoa ja persoonallisuuttaan vastaamaan ihmisiä, jotka siinä olivat. Se oli supercool… ja talo tuntui elävältä! Se liikkui ja teki melua. Tuli niin tietoinen itsestään, että se tuntui olevan tyhjässä katedraalissa.

 

Yli vuosikymmenen ajan olet ollut käytännössä kyborgi. Voitko kertoa tarinasi siitä, miten tämä matka alkoi?

Kun valmistuin alempaan korkeakoulututkintoon, tietokoneet olivat jo melko kykeneviä. Voin ostaa tietokoneen, joka pystyi tekemään yksinkertaista videonkäsittelyä 15 kehyksellä sekunnissa, Linux oli melkein asennettavissa kokemattomalle. Rakastin tietokoneiden muistia ja nopeutta, ja se johti minua kysymään: Mitä jos minulla olisi samanlaiset kyvyt?

Tapaaminen professori Steve Mannin kanssa Toronton yliopistossa, joka on edelleen InteraXonin hallituksen jäsen, oli juuri sitä, mitä etsin. Hän käveli tietokoneen kanssa päässään ja lähetti laserkuvia silmiinsä. Se oli täsmälleen sitä, mitä etsin! Jos rakastat työkaluja, mitä parempaa voit tehdä, kuin koristella itsesi niillä?

Steve ja minä aloimme työskennellä paljon yhdessä. Olimme molemmat kiinnostuneita laajentamasta yleistä havaintokykyämme. Työskentelimme paljon tietokoneavusteisen näkemisen ja varhaisen lisätyn todellisuuden parissa. Monin tavoin ne yhä häikäisevät minua enemmän kuin nykyään saatavilla oleva lisätty todellisuus. Steve oli keksinyt tavan luoda täydellinen optinen linjaus tietokonegrafiikkaan ja luonnolliseen maailmankuvaamme. Tämä mahdollisti meidän tehdä kauniita asioita, kuten yhdistää tietoja kauko-infrapunakamerasta saumattomasti näkökenttäämme. Kävellä ja nähdä lämpö on todella mielenkiintoista.

 

Voitko kertoa yksityiskohtia siitä, miten muutit ajattelutapaa ja etäisyyttä muihin?

Olin kuvitellut syvän ja saumattoman integraation tietokoneiden kanssa: tieto aina saatavilla, välitön viestintä, älykkäät avustajat ja laajennetut aistit. Uskoin todella, että teknologia olisi aina läsnä, jotta voisin käyttää sitä, kun tarvitsen.

Asiat muuttuivat minulle, kun aloin lähettää kuvia verkkosivulle. Paikallinen telekom-yhtiö lahjoitti meille joukon matkapuhelimia sarjaliitännällä laboratorioon yliopistossa. Voimme hitaasti ladata kuvia, noin yksi joka muutama sekunti matalalla resoluutiolla. Aloimme haasteen, jossa kilpailtiin siitä, kuka voisi lähettää eniten. Se oli supermielenkiintoinen koe. Käytin tietokoneita useita kuukausia lähettäen elämääni internetiin, varmistaen, että postaan joka muutama sekunti, kun tein jotain mielenkiintoista – elämäni kamerakuvan kautta. Se kuulostaa tutuilta?

Totuus on, että se oli jännittävää tuntea, ettei ollut yksin, postaten kuvitteelliselle yleisölle. Opetin, että olemalla jumiutuneena tietokoneeseen, yrittäen muodostaa yhteyden muihin virtuaalisen elämän lähettämisen kautta, pidin itseni etäällä muista… ja löysin itseni tuntevan olevani yksinäisemmän kuin koskaan. Voi.

Kävelin tietokoneen kanssa edessäni, joka ilmoitti minulle, kun sähköposti saapui, ja kun kuva ladattiin, tekstipohjainen verkkoselain avautui, jossa oli jotain, mitä olin tutkinut – se oli paljon. Vaikka olin kiinnostunut tietokoneiden avusta ongelmien ratkaisemisessa, aloin kokea vähemmän ajattelun vapautta. Tunsin itseni jatkuvasti keskeytetyksi, käynnistyksi cyberspacesta nousevista asioista. Opetin haasteen pysymisestä kosketuksissa itseksi ja menetyksestä kyvystä kuulla omaa luovan luonteeni kipinää, kun olin aina tilassa, jossa informaatio ylikuormitti minua.

Olin kiinnostunut teknologiasta, joka tekisi minusta tuntuvan laajenevan, luovan ja vapaana, mutta jotenkin maalasin itseni nurkkaan, jossa oli paljon vastakkaisia asioita.

 

Teit erittäin merkittävän yhteiskunnallisen kokeen, jossa käyttäjät Kanadassa voivat ohjata CN Towerin ja Niagaran putousten valoja mielellään. Voitko kertoa tästä?

Tämä oli erityinen mahdollisuus, joka oli meille Musessa talviolympialaisten aikaan 2010, pyrkien yhdistämään Kanadan eri osia maailmanlaajuiseen tapahtumaan.

Vaikka se ei ole vielä täysin ymmärretty, tiedämme, että aivokkeemme synchronisoituvat mielenkiintoisilla tavoilla, erityisesti, kun teemme asioita läheisen suhteen, kuten kommunikoimme toistemme kanssa, kun tanssimme tai kun teemme musiikkia. Mitä tapahtuu, kun heijastat yksilön aivotoimintaa tavalla, jotta se voidaan kokea monella?

Luomme kokemuksen, jossa ihmiset, jotka osallistuivat peleihin Kanadan länsirannikolla, voivat vaikuttaa tuhansien ihmisten kokemukseen 3000 mailin päässä. Käyttämällä aivotoimintaa havaitsevaa laitetta osallistujat yhdistivät tietoisuutensa valtavaan, reaaliaikaiseen valojen näyttöön, joka valaisi Niagaran putouksia, Toronton keskustaa CN Towerin kautta ja Kanadan parlamenttitaloja Ottawassa.

Istuit edessäsi valtavaa näyttöä, jossa oli reaaliaikainen näkymä valonäytöistä, jotta voit nähdä mieltäsi suoraan vaikuttavan tähän kokemukseen. Ihmiset soittivat ystävilleen Torontoon ja pyysivät heitä katsomaan, miten aivotoimintansa valaisi kaupungin dramaattisella valonäytöllä.

 

Kuvasit Musea “onnettomuudeksi”. Voitko kertoa yksityiskohtia tästä onnettomuudesta ja mitä opit siitä?

Usein unohdan kaiken hämmästyttävän tietotekniikan rakentamisen, koska se voi olla todella turhauttavaa. Sinun on oltava jämäkkä, mutta paljon hyvää tapahtuu, kun voit murtaa patch-kaapelit, liittää joukon satunnaisia asioita yhteen ja vain nähdä, mitä tapahtuu… juuri niin kuin Muse luotiin!

Museen ensimmäinen siemen kylvettiin, kun kirjoitimme koodin yhteyttä vanhaan lääketieteelliseen EEG-järjestelmään ja lähettivät tiedot verkon yli. Meidän piti löytää tietokonekotelo, joka tuki ISA-kortteja, ja teimme väliaikaisen pääpannan. Halusimme saada EEG-tiedot syötettyä kämmentietokoneisiimme. Voisimmeko ladata kuvia automaattisesti, kun näimme jotain mielenkiintoista? Olimme kuulleet, että kun suljet silmäsi, alpha-aivokkeesi tulevat suuremmaksi… voisiko tämä olla tapa, jolla voimme aistia, olemmeko kiinnostuneita siitä, mitä näemme?

Me hakkasimme yhteen signaalinkäsittelyä perus-FFT-spektrianalyysin kanssa ja kytkimme tuloksen yksinkertaiseen grafiikkaan, joka oli kuin yksi niistä pystysuorista valonhimmeysvivuista. Yksinkertainen idea, mutta se oli melko monimutkainen asettelu. Mitä tapahtui seuraavaksi, oli todella mielenkiintoista. Otimme vuorotellen laitteen, sulkimme ja avasimme silmämme. Varmasti vivun nousi ja laski, mutta se kierteli uteliaasti… Mitä tapahtui?

Viettimme tunteja leikkien sen kanssa, yrittäen ymmärtää, mitä sai sen kiertämään ja voisimmeko hallita sitä. Kytkimme tulosteen kuuluvaksi ääneksi, jotta voimme kuulla sen nousevan ja laskevan, kun suljemme silmämme. Muistan istuvani siinä tunteja, silmät kiinni, tutkien tietoisuuttani ja ääntä.

Pian löysin, että voin kohdistaa tietoisuuttani eri tavoilla, muuttaa ääntä, mutta myös muuttaa kokemustani, havaintojani ja sitä, miten tunsin itseni. Kutsuimme muita ihmisiä laboratorioon, ja sama tapahtui heille. He sulkevat silmänsä ja menivät syvään sisäiseen tutkimukseen (kuulostaa melkein meditaatiolta!). Se oli villi – meillä oli täysin unohtunut alkuperäinen ideamme, koska tämä oli paljon mielenkiintoisempaa. Se oli onnettomuus – voin sanoa, että löysin meditaation ja tietoisen läsnäolon teknologian kautta, vahingossa!

 

Voitko selittää jotain teknologiaa, joka mahdollistaa Museen aivokkeiden havaitsemisen?

Aivot ovat miljardeja hermosoluja, ja jokainen yksittäinen hermosolu yhdistyy (keskimäärin) tuhansiin muihin. Viestintä tapahtuu niiden välillä pienien sähköisten virtojen kautta, jotka kulkevat hermosoluissa ja valtavien aivopiirien verkostoissa. Kun nämä hermosolut ovat aktiivisia, ne tuottavat sähköisiä pulsaatioita – kuvittele aallon leviävän väkijoukossa urheilutapahtumassa – tämä synchronoitu sähköinen toiminta johtaa “aivokkeisiin”.

Kun monet hermosolut vuorovaikuttavat tämän tavoin samanaikaisesti, tämä toiminta on tarpeeksi voimakasta voidakseen havaita jopa aivojen ulkopuolella. Asettamalla sähködetektorit kaljuksi, tämä toiminta voidaan vahvistaa, analysoida ja visualisoida. Tämä on elektroenkefalograafia eli EEG – nimike, joka tarkoittaa sähköistä aivokuvausta. (Enkefalon, aivot, on johdettu antiikin kreikan “enképhalos” -sanasta, joka tarkoittaa “päässä”.)

Muse on testattu ja validoituna EEG-järjestelmiä vastaan, jotka ovat eksponentaalisesti kalliimpia, ja sitä käytetään neurotieteilijöiden kanssa ympäri maailmaa todellisissa neurotieteellisissä tutkimuksissa laboratorion ulkopuolella. Käyttäen 7 hienosti kalibroituja anturia – 2 otsalla, 2 korvien takana, 3 viiteanturia – Muse on seuraavan sukupolven, nykyaikainen EEG-järjestelmä, joka käyttää edistyneitä algoritmeja koulutusohjelmaa aloitteleville ja keskitasoisille meditoinneille hallitsemaan fokuksensa. Se opettaa käyttäjille, miten manipuloida aivotilansa ja miten muuttaa aivojen ominaisuuksia.

Muse-algoritmi on monimutkaisempi kuin perinteinen neurofeedback. Luomalla Muse-sovelluksen aloimme aivokkeista ja vietimme vuosia tekeillä intensiivistä tutkimusta ensisijaisista, toissijaisista ja kolmansiijaisista aivokkeiden ominaisuuksista ja siitä, miten ne vuorovaikuttavat fokuksella varustetun meditaation kanssa.

 

Mitkä ovat joitain merkittäviä meditatiivisia tai henkisiä parannuksia, joita olet henkilökohtaisesti huomannut Musea käyttäessäsi?

Huomioni on joustavampi ja vahvempi. Se kuulostaa yksinkertaiselta, mutta tiedän, miten rentoutua. Ymmärrän tunteitani paremmin ja olen enemmän yhteydessä muihin. Se on todella elämänmuuttava.

 

Onko muita ryhmiä, jotka ovat ahkeria Muse-käyttäjiä, paitsi meditointiin?

On paljon biohakkeria ja tutkijoita – jotkut ovat tehneet todella upeita asioita. Prof. Krigolson UVic:stä on käyttänyt Musea Marsin asuinpaikassa ja on tehnyt kokeita Mount Everestillä munkkeja, jotka asuvat luostareissa vuoren huipulla. On myös jotkut hienot ihmiset MIT Median laboratoriossa, jotka käyttävät Musea unien aikana vaikuttaakseen unisi. Se on niin cool.

 

Onko mitään muuta, mitä haluaisit kertoa Musesta?

Astuminen uneen Muse S -tuotteen kanssa on ollut äärettömän mielenkiintoinen sekä tuote- että tutkimussuunnasta, ja erittäin jännittävä, kun tulee kyse Museen positiivisista sovelluksista monille, jotka etsivät parempaa unta.

Rakastan myös, miten Muse voi muuttaa aivotoimintaa ääneksi. Vuosien tutkimisen jälkeen biosignaaleista en ole koskaan väsynyt kauneudesta, joka virtaa meissä. Kuin aallot meressä, ne ovat äärettömän monimutkaisia, mutta yksinkertaisia ja tuttuja. Rakastan, että olemme kauniita sisältäpäin, ja rakastan haastetta, jossa tuodaan se esiin ja juhlistetaan sitä äänenä ja musiikkina.

Kiitos hienosta haastattelusta, odotan innostuneena pääseväni käsiini Museen, ja kaikki, jotka haluavat tietää lisää tai tilata yksikön, voivat vierailla Muse-sivustolla.

Antoine on visionäärisellä johtajalla ja Unite.AI:n perustajakumppani, joka on intohimoisesti omistautunut tulevaisuuden älyteknologian ja robotiikan muotoiluun ja edistämiseen. Sarjayrittäjänä hän uskoo, että älyteknologia tulee olemaan yhtä mullistava yhteiskunnalle kuin sähkö, ja hän on usein innostunut puhumaan älyteknologian ja AGI:n mahdollisuuksista.

Hän on tulevaisuudentutkija, joka on omistautunut tutkimiseen, miten nämä innovaatiot muotoilevat maailmaamme. Lisäksi hän on Securities.io:n perustaja, joka on keskittynyt sijoittamiseen älykkäisiin teknologioihin, jotka määrittelevät tulevaisuutta ja muokkaavat koko toimialoja.