AR, XR, dan antarmuka otak
Chris Aimone, Co-Pendiri dan Chief Technology Officer di Muse – Seri Wawancara

Chris Aimone co-pendiri Muse dengan etos untuk menciptakan teknologi yang memperluas perspektif kita tentang diri kita sendiri dan dunia di sekitar kita.
Sebagai seorang seniman dan penemu di hati, praktik kreatif dan desain Chris telah meliputi banyak bidang, termasuk arsitektur, realitas tertambah, penglihatan komputer, musik, dan robotika. Dalam upaya untuk membawa pengalaman inovatif baru, Chris telah membangun instalasi untuk Pusat Sains Ontario dan berkontribusi pada proyek seni teknologi utama yang ditampilkan di seluruh dunia (termasuk Burning Man).
Apakah Anda bisa berbagi dengan kami bagaimana cinta Anda terhadap Robotika dan Antarmuka Mesin-Otak (BMI) dimulai?
Ketika saya masih sangat muda, bukan mainan anak-anak yang populer, saya tertarik dengan alat – sehingga saya suka, bahwa buku favorit saya sebenarnya adalah katalog alat (pada 18 bulan) dan saya ingin mesin jahit untuk Natal ketika saya berusia 3.
Saya tertarik dengan apa yang dapat dilakukan alat – bagaimana mereka dapat memperluas jangkauan saya ke yang mustahil, dan cinta saya terhadap robotika dan BMI hanya merupakan perpanjangan dari itu. Saya sangat penasaran tentang apa yang terletak di luar batas kemampuan tubuh saya, hanya di luar jangkauan indra saya. Ini banyak masuk akal dengan cara, karena saya percaya bahwa manusia suka memecahkan masalah, baik melalui indra kita atau dengan menerapkan pengetahuan dan alat kita bersama untuk menjelajahi dan memahami pengalaman kita.
Saya tidak mulai membangun robot atau BMI sampai kemudian, saya yakin itu hanya masalah akses. Komputer tidak terlalu terjangkau (atau dapat diakses) pada tahun 80-an. Saya belajar memprogram pada Commodore 64, tetapi saya tidak ingin ciptaan saya hanya hidup di komputer. Saya belajar untuk menghubungkan sesuatu ke port paralel, tetapi itu frustrasi dan membosankan. Tidak ada Arduino, tidak ada raspberry pie, tidak ada pengiriman hari berikutnya dari Digikey.
Hal terkeren yang saya bangun saat itu adalah topeng dengan beberapa lampu komputer yang dapat berkedip yang saya dapat berdenyut ke mata saya pada frekuensi yang berbeda. Saya telah memperhatikan bahwa persepsi saya sedikit aneh saat melihat LED berkedip dalam eksperimen saya, jadi saya penasaran tentang apa yang akan terjadi jika saya mempengaruhi seluruh penglihatan saya dengan cara itu. Jelas saya memiliki minat laten terhadap kesadaran dan antarmuka mesin-otak. Saya sangat penasaran tentang apa yang mungkin saya bangun jika saya memiliki akses ke Muse atau teknologi hackable lainnya hari ini!
Apa beberapa robot pertama yang Anda kerjakan?
Saya membangun robot pendaki dinding yang sangat keren dengan beberapa teman. Ini memiliki empat cangkir vakum untuk tangan dan perut vakum besar. Satu-satunya penggunaan yang bisa kita pikirkan untuk itu adalah pembersihan jendela otomatis. Ini adalah proyek yang sangat menyenangkan yang dimungkinkan oleh kebaikan vendor otomatisasi yang memberikan kita bagian ketika kita menelepon mereka dengan ide gila… tetapi itu benar-benar berhasil! Proyek ini juga mengajarkan kita banyak tentang interferensi elektromagnetik dan kekuatan drywall di rumah.
Mengikuti itu, saya membangun robot pelukis satu musim panas yang melukis di canvas dinding besar 6×8 menggunakan kuas yang dipasang pada printer Commodore 64 yang bermutasi. Ini adalah monster yang menggunakan setiap bit teknologi sampah yang bisa saya temukan, termasuk tangki barbekyu, tetikus komputer, dan sepatu roda lama saya. Ini memiliki kamera web dari pertengahan 90-an dan mencoba menggambar apa yang dilihatnya. Ini sangat konyol… saya masih merindukannya karena kepribadiannya yang sabar dan humoris.
Ketika saya melakukan master, saya membangun robot yang sama aneh dengan beberapa teman yang seukuran rumah. Kami tertarik dengan apa yang akan terjadi jika sebuah bangunan berubah bentuk dan kepribadian sebagai respons terhadap orang-orang yang ada di dalamnya. Ini sangat keren… dan bangunan itu terasa hidup! Ini bergerak dan membuat suara. Anda menjadi sangat sadar akan diri sendiri, terasa seperti berada di sebuah katedral yang kosong.
Untuk lebih dari satu dekade Anda secara esensial menjadi cyborg. Apakah Anda bisa berbagi cerita tentang bagaimana perjalanan ini dimulai?
Ketika saya menyelesaikan gelar sarjana, komputer telah menjadi cukup kuat. Saya bisa membeli komputer yang bisa melakukan pemrosesan video sederhana pada 15 frame per detik, Linux hampir bisa diinstal oleh orang yang tidak berpengalaman. Saya suka memori dan kecepatan komputer dan itu membuat saya bertanya-tanya: Apa jika saya memiliki kemampuan serupa?
Saya bertemu dengan seorang profesor di UofT bernama Steve Mann yang merupakan penemu liar, dan masih anggota dewan penasihat InteraXon hari ini. Dia berjalan dengan komputer di kepalanya dan mengirimkan gambar laser ke matanya. Ini tepat apa yang saya cari! Jika Anda suka alat, apa yang lebih baik daripada menghiasi diri Anda dengan mereka?
Steve dan saya mulai bekerja bersama banyak. Kami berdua tertarik dengan memperluas persepsi kita secara keseluruhan. Kami bekerja banyak dengan penglihatan komputer dan membangun perangkat realitas tertambah yang sangat awal. Dalam banyak cara, mereka masih lebih mengesankan saya daripada AR yang tersedia hari ini. Steve telah menemukan cara untuk menciptakan keselarasan optik yang sempurna antara grafik komputer dan pandangan alami dunia. Ini memungkinkan kami untuk melakukan hal-hal yang indah seperti melebur informasi dari kamera inframerah jauh ke dalam pandangan kami secara seamless. Berjalan dan dapat melihat panas sangat menarik.
Anda mengurangi ambisi cyborg Anda, karena itu menyebabkan Anda menjauhkan diri dari orang lain. Apakah Anda bisa berbagi beberapa detail tentang transisi ini dalam mindset Anda?
Saya telah membayangkan integrasi yang dalam dan seamless dengan teknologi komputasi: Informasi selalu tersedia, komunikasi instan, asisten AI, dan kemampuan sensorik yang diperluas. Saya benar-benar percaya bahwa teknologi selalu ada sehingga saya bisa menggunakannya saat dibutuhkan.
Hal-hal berubah bagi saya ketika saya mulai menyiarkan gambar ke situs web. Perusahaan telekom lokal menyumbangkan sejumlah ponsel dengan koneksi data serial ke laboratorium kami di universitas. Kami bisa mengunggah gambar, sekitar satu setiap beberapa detik dengan kualitas rendah. Kami memulai tantangan untuk melihat siapa yang bisa melakukan streaming paling banyak. Ini adalah eksperimen yang sangat menarik. Saya mengenakan komputer selama berbulan-bulan, mengalirkan hidup saya ke internet, memastikan untuk memposting setiap beberapa detik kapanpun saya melakukan sesuatu yang menarik — hidup saya melalui tampilan kamera.
Kebenarannya, itu menyenangkan untuk merasa seperti saya tidak sendirian, memposting ke audiens yang dibayangkan. Suara familiar? Kami semua mendapatkan sedikit rasa media sosial hari ini, 20 tahun yang lalu. Dan apa yang saya pelajari?
Terjebak dalam komputer, mencoba terhubung dengan orang lain dengan menyiarkan kehidupan virtual, membuat saya menjauhkan diri dari orang lain… dan saya menemukan diri saya merasa lebih sendirian daripada sebelumnya. Woah.
Saya berjalan dengan informasi yang terus-menerus, dengan terminal komputer di depan wajah saya, memberi sinyal kapan pun email masuk, dan ketika gambar diunggah, browser web teks akan terbuka dengan sesuatu yang saya teliti – itu banyak.
Meskipun saya tertarik dengan komputer yang membantu saya memecahkan masalah, saya mulai mengalami kurangnya kebebasan berpikir. Saya merasa terus-menerus terganggu, dipicu oleh apa yang muncul melalui cyberspace. Saya menemukan tantangan untuk tetap berhubungan dengan siapa Anda dan kehilangan kemampuan untuk menyetel ke spark kreativitas Anda ketika Anda selalu dalam keadaan overload informasi.
Saya tertarik dengan teknologi yang membuat saya merasa ekspansif, kreatif, dan tak terikat, tetapi entah bagaimana, saya menggambar diri saya ke dalam sudut dengan banyak hal yang berlawanan.
Anda melakukan eksperimen sosial yang luar biasa, di mana pengguna di seluruh Kanada dapat mengontrol lampu di Menara CN dan Air Terjun Niagara dengan pikiran mereka. Apakah Anda bisa menjelaskan ini?
Ini adalah kesempatan khusus yang kami miliki pada awal perjalanan Muse di Olimpiade Musim Dingin 2010, dalam upaya untuk menghubungkan berbagai bagian Kanada ke acara global.
Ini tidak dipahami, kita tahu bahwa gelombang otak kita menyelaraskan dalam cara yang menarik, terutama ketika kita melakukan sesuatu dalam hubungan dekat, seperti berkomunikasi satu sama lain, ketika kita menari atau membuat musik. Apa yang terjadi ketika Anda memproyeksikan aktivitas otak individu dengan cara untuk dialami oleh banyak orang?
Kami menciptakan pengalaman di mana orang-orang yang menghadiri pertandingan di pantai barat Kanada dapat mempengaruhi pengalaman ribuan orang, 3000 mil jauhnya. Dengan mengenakan perangkat penginderaan otak, peserta menghubungkan kesadaran mereka ke tampilan cahaya nyata yang besar yang menerangi Air Terjun Niagara, pusat kota Toronto melalui Menara CN, dan gedung parlemen Kanada di Ottawa.
Anda duduk di depan layar besar dengan tampilan langsung dari tampilan cahaya sehingga Anda bisa melihat efek langsung dari pikiran Anda dalam pengalaman yang lebih besar dari kehidupan ini. Orang-orang akan menelepon teman di Toronto dan meminta mereka untuk menonton saat pola aktivitas di otak mereka menerangi kota dengan drama permainan cahaya.
Anda telah menjelaskan Muse sebagai ‘kecelakaan bahagia’. Apakah Anda bisa berbagi detail tentang kecelakaan bahagia ini, dan apa yang Anda pelajari dari pengalaman ini?
Saya sering lupa keindahan dari mengutak-atik karena membangun teknologi bisa sangat membosankan. Anda harus menjadi kaku, tetapi banyak hal yang hebat terjadi ketika Anda bisa mengeluarkan kabel patch, menghubungkan sejumlah besar hal acak bersama, dan hanya melihat apa yang terjadi… seperti halnya Muse diciptakan!
Benih pertama Muse ditanam ketika kami menulis kode untuk menghubungkan ke sistem EEG medis lama dan mengalirkan data melalui jaringan. Kami harus menemukan chassis komputer yang mendukung kartu ISA dan kami membuat headband sementara. Kami ingin mendapatkan data EEG yang mengalir ke komputer wearable kami. Bisakah kami mengunggah gambar secara otomatis ketika kami melihat sesuatu yang menarik? Kami telah mendengar bahwa ketika Anda menutup mata, gelombang otak alpha Anda akan menjadi lebih besar… bisakah ini menjadi cara kami mengetahui jika kami tertarik dengan apa yang kami lihat?
Kami mengutak-atik pemrosesan sinyal dengan beberapa analisis spektral FFT dasar dan menghubungkannya ke grafik sederhana yang seperti salah satu penggeser cahaya vertikal. Ide sederhana, tetapi itu adalah pengaturan yang cukup rumit. Apa yang terjadi selanjutnya sangat menarik. Kami bergiliran mengenakan perangkat, menutup dan membuka mata. Ya, penggeser itu naik dan turun, tetapi itu akan berkelana di sekitar dengan cara yang aneh. Ketika kami menutup mata, itu naik, tetapi tidak semua jalan, dan masih berkelana… Apa yang terjadi?
Kami menghabiskan berjam-jam bermain dengannya, mencoba memahami apa yang membuatnya berkelana dan jika kami bisa mengendalikannya. Kami menghubungkan output ke suara yang dapat didengar sehingga kami bisa mendengar naik dan turun ketika kami memiliki mata tertutup. Saya ingat duduk di sana selama berjam-jam, mata tertutup, menjelajahi kesadaran saya dan suara.
Saya segera menemukan bahwa saya bisa fokus kesadaran saya dengan cara yang berbeda, mengubah suara, tetapi juga mengubah pengalaman saya, persepsi saya, dan cara saya merasa. Kami mengundang orang lain ke laboratorium dan hal yang sama terjadi pada mereka. Mereka akan menutup mata dan masuk ke dalam eksplorasi dalam (terdengar seperti meditasi, bukan?!). Ini liar – kami benar-benar melupakan ide asli kami karena ini jauh lebih menarik. Itu adalah kecelakaan bahagia – saya bisa mengatakan bahwa saya menemukan meditasi dan kesadaran melalui teknologi, secara tidak sengaja!
Apakah Anda bisa menjelaskan beberapa teknologi yang memungkinkan Muse untuk mendeteksi gelombang otak?
Otak memiliki miliaran neuron, dan setiap neuron individu terhubung (rata-rata) ke ribuan lainnya. Komunikasi terjadi di antara mereka melalui arus listrik kecil yang berjalan sepanjang neuron dan melalui jaringan sirkuit otak yang luas. Ketika semua neuron ini diaktifkan, mereka menghasilkan pulsa listrik – bayangkan gelombang yang bergulir melalui kerumunan di stadion olahraga – aktivitas ini menyebabkan “gelombang otak”.
Ketika banyak neuron berinteraksi dengan cara ini pada saat yang sama, aktivitas ini cukup kuat untuk dideteksi bahkan di luar otak. Dengan meletakkan elektroda di kulit kepala, aktivitas ini dapat diperkuat, dianalisis, dan divisualisasikan. Ini adalah elektroensefalografi, atau EEG – kata yang mewah yang hanya berarti grafik listrik otak. (Ensefalos, otak, berasal dari bahasa Yunani kuno “enképhalos,” yang berarti “di dalam kepala.”)
Muse telah diuji dan divalidasi terhadap sistem EEG yang jauh lebih mahal, dan digunakan oleh ilmuwan saraf di seluruh dunia dalam penelitian ilmu saraf nyata di dalam dan di luar laboratorium. Menggunakan 7 sensor yang sangat terkalibrasi – 2 di dahi, 2 di belakang telinga plus 3 sensor referensi – Muse adalah sistem EEG generasi berikutnya yang menggunakan algoritma canggih untuk melatih pemula dan meditator menengah untuk mengendalikan fokus. Ini mengajarkan pengguna cara memanipulasi keadaan otak mereka dan cara mengubah karakteristik otak mereka.
Teknologi algoritma Muse lebih kompleks daripada umpan balik neurotradisional. Dalam menciptakan aplikasi Muse, kami memulai dari gelombang otak ini dan kemudian menghabiskan bertahun-tahun melakukan penelitian intensif pada kombinasi tingkat tinggi dari karakteristik primer, sekunder, dan tersier dari data EEG mentah dan bagaimana mereka berinteraksi dengan meditasi perhatian yang terfokus.
Apa beberapa perbaikan meditatif atau mental yang Anda perhatikan secara pribadi dari menggunakan Muse?
Perhatian saya lebih lincah dan lebih kuat. Terdengar sederhana, tetapi saya tahu cara rileks. Saya memahami emosi saya lebih baik dan saya lebih sejalan dengan orang lain. Ini benar-benar mengubah hidup.
Di luar orang-orang yang bermeditasi, apa segmen populasi lain yang merupakan pengguna setia Muse?
Ada banyak biohacker dan ilmuwan – beberapa di antaranya telah melakukan hal-hal yang sangat keren. Prof. Krigolson dari UVic telah menggunakan Muse di habitat Mars, dan dia telah melakukan eksperimen di Gunung Everest dengan biarawan yang tinggal di biara di gunung. Ada juga beberapa orang hebat di laboratorium media MIT yang menggunakan Muse saat tidur untuk mempengaruhi mimpi. Sangat keren.
Apakah ada yang lain yang Anda ingin bagikan tentang Muse?
Masuk ke dunia tidur dengan rilis produk terbaru Muse S telah menjadi sangat menarik dari perspektif produk dan penelitian, dan sangat menggembirakan ketika datang ke aplikasi positif yang Muse dapat miliki untuk banyak orang yang mencari tidur yang lebih baik.
Juga, saya pribadi suka bagaimana Muse dapat merender aktivitas otak Anda sebagai suara. Dari tahun-tahun mempelajari biosinyal, sesuatu yang tidak pernah saya bosan adalah keindahan gelombang ini yang mengalir di dalam kita. Seperti gelombang laut, mereka sangat kompleks, tetapi sederhana dan akrab. Saya suka bahwa kita cantik di dalam, dan saya suka tantangan untuk membawa itu keluar dan merayakannya sebagai suara dan musik.
Terima kasih atas wawancara yang luar biasa, saya berharap bisa mendapatkan Muse, siapa saja yang ingin mempelajari lebih lanjut atau memesan unit harus mengunjungi situs web Muse.












