Ivan Crewkov CEO & Salah Satu Pendiri Buddy AI – Seri Wawancara

Ivan Crewkov adalah CEO & Salah Satu Pendiri sobat AI, tutor AI percakapan untuk anak-anak pertama di dunia, dengan misi memastikan semua siswa mampu membayar bimbingan bahasa Inggris 1:1. Setelah pindah ke AS dari Siberia, Ivan menyaksikan putrinya yang berusia prasekolah berjuang untuk belajar bahasa Inggris. Hal ini menginspirasinya untuk membangun Buddy, karakter fiksi yang dapat diajak berkomunikasi oleh anak-anak melalui kekuatan AI generatif.

Sejak diluncurkan pada tahun 2020, aplikasi Buddy telah memenangkan beberapa penghargaan dan menduduki puncak tangga lagu dalam kategori Anak dan Pendidikan di App Store dengan lebih dari 36 juta unduhan di seluruh dunia.

Pada tahun 2014, Anda meluncurkan Cubic.ai, salah satu aplikasi speaker pintar dan asisten suara pertama untuk rumah pintar. Apa saja hal penting yang dapat Anda ambil dari pengalaman ini?

Saya tidak yakin saya dapat menerima pujian atas peluncuran Cubic.ai. Saya bergabung dengan perusahaan ini setahun setelah pendiriannya dan menerima gelar salah satu pendiri atas kontribusi saya.

Berikut adalah kesimpulan utamanya:

• Perangkat keras itu sulit, tetapi seseorang harus tetap melakukannya. Mendapatkan pendanaan ventura untuk startup perangkat keras sangatlah sulit. Satu-satunya hal yang membuat segalanya lebih mudah adalah crowdfunding.
• Ruang lingkup produk Voice-first sangat luas dan beragam. Apa yang berlaku untuk rumah pintar tidak berlaku untuk pembelajaran awal, mulai dari teknologi hingga desain UX.

Bisakah Anda berbagi kisah asal usul Buddy dan bagaimana asal mula keluarga Anda pindah ke AS dari Siberia?

Dengan Cubic.ai, saya pindah dari Siberia ke AS pada tahun 2014 dan membawa serta keluarga saya. Putri sulung saya, Sofia, mulai belajar bahasa Inggris sebagai bahasa kedua ketika dia bersekolah di prasekolah di Mountain View, California, pada usia 4 tahun. Sofia berjuang untuk mulai berbicara bahasa Inggris selama 3 – 5 bulan pertama di prasekolah. Kami khawatir karena dia tidak dapat menemukan teman dan bermain dengan sebagian besar teman-temannya karena bahasa tersebut. Kami mulai mencari cara untuk membantunya belajar berbicara.

Jelas terlihat bahwa aplikasi bahasa untuk anak-anak tidak mengajarkan cara berbicara (dan semuanya tetap sama dari waktu ke waktu), dan aplikasi bahasa untuk orang dewasa seperti Duolingo tidak berfungsi untuk anak-anak karena UX. Jadi, kami mulai mengambil pelajaran di platform yang menghubungkan anak-anak dengan guru langsung melalui konferensi video. Contohnya adalah Cambly, VipKid, Novakid, GoStudent, dll. Saat saya mengamati Sofia belajar dengan tutor langsung secara virtual, saya melihat manfaat dari perhatian 1:1 dan latihan berbicara aktif, namun juga melihat kekurangan dari program-program ini secara umum.

Misalnya, seiring dengan berkembangnya skala mereka, banyak Platform Bimbingan Belajar Online dan Sekolah Online harus mempekerjakan orang-orang yang tidak memiliki latar belakang pedagogi, keterampilan dalam mengajar anak-anak, atau bahkan tingkat kemahiran bahasa Inggris yang memadai. Jadi, untuk memastikan kualitas pendidikan tertentu, platform online dan sekolah secara ketat menyusun kurikulum dan rencana pembelajaran, dan guru harus menggunakan latihan yang sudah disiapkan sebelumnya, termasuk fragmen audio dan video. Sayangnya, di banyak platform, tutor pada dasarnya bekerja seperti bot.

Namun, bimbingan belajar online telah menjadi satu-satunya cara bagi kebanyakan orang untuk belajar BERBICARA Bahasa Inggris, terutama di negara-negara yang tidak berbahasa Inggris. Namun karena kekurangan guru, biayanya terlalu mahal bagi sebagian besar keluarga. Belajar dengan guru langsung adalah layanan pendidikan premium yang hanya mampu dijangkau oleh sedikit keluarga.

Saya dan rekan pendiri menyadari bahwa bimbingan AI adalah satu-satunya cara terukur untuk memberikan bimbingan belajar bahasa Inggris 1:1 kepada setiap anak di seluruh dunia. Segera, kami mengetahui bahwa ini juga yang terbaik dari sudut pandang pendidikan. Saat kami mempertimbangkan prototipe awal Buddy, kami terinspirasi oleh penelitian di bidang Manusia Virtual dalam Pendidikan.

Studi akademis menunjukkan keunggulan dan keunggulan pendidikan agen pedagogi animasi dibandingkan dengan alat dan lingkungan pembelajaran yang lebih tradisional. Misalnya, lihat Interaksi Tatap Muka dengan Agen Pedagogis, Dua Puluh Tahun Kemudian, artikel tahun 2016 yang mengulas bidang ini dan mengutip banyak materi yang relevan. Ini salah satu kutipannya:

“Secara khusus, meta-analisis menemukan bahwa agen memang meningkatkan pembelajaran dibandingkan dengan lingkungan pembelajaran yang tidak menampilkan agen. […] Mungkin yang paling menarik adalah temuan bahwa, dalam pendidikan formal, agen pedagogi tampaknya lebih efektif untuk pelajar yang lebih muda dibandingkan pelajar yang lebih tua. […] Penelitian telah menemukan, misalnya, bahwa siswa yang berinteraksi dengan agen pedagogi menunjukkan hasil belajar yang lebih kuat ketika 1) agen pedagogi berbicara daripada berkomunikasi dengan teks, 2) agen pedagogi menggunakan gerakan mirip manusia, 3) agen pedagogi berkomunikasi secara percakapan daripada berkomunikasi secara formal, dan 4) agen pedagogi menggunakan ungkapan yang sopan dan bukannya langsung.” 

Hal ini memperkuat keyakinan kami terhadap pendekatan bimbingan belajar AI multimodal. Kami memutuskan bahwa Buddy akan menjadi tutor AI multimodal – agen pedagogi animasi yang mampu mengenali suara dan pemrosesan bahasa alami. Pada intinya, sistem Bimbingan Belajar AI terdiri dari tiga teknologi utama:

1. Pengenalan dan analisis ucapan otomatis (ASR). memungkinkan kita mengolah dan menganalisis tuturan siswa.
2. Pemrosesan bahasa alami (NLP), pemahaman bahasa alami dan manajemen dialog yang memproses isi pembicaraan siswa dan menghasilkan respon selanjutnya. Responsnya terdiri dari komponen verbal dan nonverbal.
3. Karakter virtual animasi yang diwujudkan yang memberikan umpan balik mendengarkan dan memutar ulang respons sistem. Karakter dianimasikan secara prosedural – sistem membuat animasi dengan cepat dari respons NLP.

Ketiga komponen tersebut sangat penting dalam pendekatan kami karena hanya dengan kombinasi ketiga komponen tersebut memungkinkan kami membangun tutor yang menarik dan interaktif serta memberikan pengalaman pendidikan yang sukses.

Putri saya Sofia dan putra salah satu pendiri saya, Arseny, menjadi pengguna pertama Buddy. Sofia menggunakan Buddy versi paling awal hingga kelas 1 SD.

Beberapa tahun kemudian, putri bungsu saya, Alisa, mulai menggunakan Buddy pada usia tiga tahun ketika dia bersekolah di prasekolah. Sekarang, dia berada di Taman Kanak-Kanak Transisi dan bermain dengan Buddy hampir setiap hari. Saat Alisa mulai belajar dengan Buddy, dia mengalami beberapa masalah bicara, sehingga Buddy sering kali tidak memahaminya. Namun setelah beberapa minggu berlatih, tidak hanya bahasa Inggrisnya tetapi kemampuan bicaranya pun meningkat, karena dia mencoba yang terbaik untuk membuat Buddy memahaminya.

Mengapa cara-cara lama dalam mengajarkan bahasa kedua sangat tidak efektif?

Saat ini, kami fokus pada penyelesaian masalah pendidikan tertentu yang berhubungan dengan bicara. Anda tidak dapat belajar berbicara tanpa latihan berbicara:

• Sebagian besar alat pendidikan tradisional berfokus pada pengajaran keterampilan bahasa lain seperti membaca atau menulis.
• Aplikasi Bahasa untuk anak-anak tidak mengajarkan keterampilan berbicara.
• Beberapa Aplikasi Bahasa untuk orang dewasa saat ini menyediakan latihan berbicara menggunakan AI, namun layanan ini tidak berfungsi untuk anak-anak karena UX, masalah keamanan, dan peraturan privasi.
• Tutor langsung terlalu mahal bagi sebagian besar keluarga. Sayangnya, banyak tutor yang tidak memiliki pelatihan pedagogi atau tidak mahir berbahasa Inggris.

Buddy adalah tutor AI multimodal.

• Ini lebih unggul dari aplikasi pembelajaran tradisional karena berfungsi seperti guru langsung dalam banyak hal. Izinkan saya mengutip salah satu penasihat kami, Dr. Alex Desatnik, PhD, University College London:

“Guru virtual berbasis suara. Konsep ini mungkin terdengar sederhana, namun ada ilmu pengetahuan di baliknya. Dari sudut pandang psikologi pembelajaran, karakter berbicara virtual merupakan perwujudan dari guru. Pendekatan ini menciptakan efek yang disebut kepercayaan epistemik, memperkuat motivasi dan keterlibatan siswa, serta meningkatkan hasil pembelajaran.”

• Buddy memiliki beberapa kelebihan bahkan dibandingkan guru manusia. Buddy tidak menghakimi, dan bagi beberapa anak, lebih mudah untuk mulai berbicara dengan Buddy daripada dengan guru. Itu sebabnya saat ini, banyak tutor menggunakan Buddy sebagai pemecah kebekuan yang membantu anak-anak mengatasi ketakutan dan ketidaknyamanan mereka dan mulai berbicara dalam bahasa tersebut.

Buddy bekerja untuk membantu guru, bukan menggantikan mereka.

Saya pikir sangat penting untuk mencatat hal ini. Buddy dapat membantu guru mengotomatiskan bagian biasa dari pekerjaan mereka – dengan memberikan latihan rutin. Kami ingin memberikan kekuatan kepada guru sekolah. Buddy seperti tim tutor dan asisten guru, bekerja secara individu dengan setiap anak di kelas dan melapor kepada guru kelas.

Bisakah Anda membahas bagaimana Sobat menggunakan unsur gamifikasi untuk membuat anak tetap semangat belajar?

Fakta menarik: Aplikasi seluler Buddy diunduh 22 juta kali pada tahun 2023, dan lebih dari 70% unduhan ini dilakukan oleh anak-anak. Untuk anak-anak, Aplikasi kami adalah permainan tempat mereka bermain dengan Buddy, teman virtual mereka yang bisa berbicara dan seorang Youtuber populer. Anak-anak mengunduh Aplikasi dan meyakinkan orang tua untuk membayar langganan, menjelaskan bahwa Buddy adalah seorang guru.

Agar pendekatan ini berhasil, kami merancang Buddy sebagai game dengan cerita dan alam semesta. Kami bekerja dengan desainer dan penulis karakter Hollywood untuk menciptakan Buddy dan kisahnya. Kami memiliki tim desain permainan yang sangat kuat yang bekerja secara langsung dengan para pendidik kami dan mengubah kurikulum dan latihan menjadi permainan mini di dunia Buddy.

Apa sajakah fungsi inti lainnya yang membuat Buddy begitu hebat dalam mengajar bahasa kedua?

Fungsi inti kami benar-benar terfokus pada Buddy sebagai tutor AI multimodal:

• Pengenalan suara
• AI percakapan
• Perilaku visual avatar

Apa sajakah algoritma pembelajaran mesin yang digunakan di Buddy?

Kami sedang mengembangkan seluruh teknologi, bekerja sama untuk memungkinkan pendekatan bimbingan belajar AI multimodal kami.

• BSR (Pengenalan Ucapan Buddy) adalah mesin pengenalan ucapan khusus untuk menangani ucapan anak-anak beraksen dan mematuhi peraturan seperti COPPA.
• BLM (Model bahasa Buddy) — Mesin AI Percakapan untuk Anak-anak. Aman, cepat, dan bebas dioperasikan. Ini berfokus pada fungsi pendidikan tertentu dan kurang fleksibel dibandingkan model bahasa besar.
• BAYI (Mesin Perilaku Avatar Buddy). Teknologi ini menghasilkan perilaku visual karakter kita berdasarkan konteks percakapan. Buddy mengerti kapan dia perlu tersenyum, berubah warna, atau memakai topi konyol.

Banyak sistem pengenalan suara kesulitan dengan aksen terutama untuk anak kecil, bagaimana Buddy mengatasi tantangan ini?

Dengan mengembangkan BSR, teknologi Pengenalan Ucapan milik kami.

Audiens dan pasar kami yang unik memerlukan pengembangan teknologi eksklusif. Sobat pasti mengenali aksen bicara anak muda pembelajar Bahasa Inggris sebagai Bahasa Asing (EFL) yang sangat tinggi. Faktor rumit lainnya adalah siswa pemula memulai dengan mempelajari kata-kata terpisah, sering kali pendek, yang sangat sulit dikenali tanpa konteks. Terakhir, pasar anak-anak diatur dengan ketat, dan pengenalan suara tunduk pada Undang-Undang Perlindungan Privasi Daring Anak (COPPA) karena rekaman suara dianggap sebagai hal yang tidak dapat diabaikan. Informasi Identifikasi Pribadi (PII).

BSR menangani ucapan anak-anak dengan aksen berbeda, diproduksi di berbagai perangkat seluler dengan mikrofon dengan berbagai kualitas akustik dan di lingkungan kehidupan nyata dengan berbagai jenis kebisingan latar belakang. Dan secara desain sudah sesuai dengan COPPA.

Bekerja secara global, kami berhasil mengumpulkan kumpulan data unik untuk melatih model kami. Saat ini, BSR mengungguli solusi komersial yang tersedia dalam mengenali dan memahami ucapan anak-anak yang beraksen.

Bagaimana Anda berencana memperluas penetrasi pasar untuk menyasar orang tua yang mungkin belum terbiasa dengan teknologi AI?

Buddy mulai melihat kesuksesan sebelum AI menjadi kata kunci, dan sebagian besar pengguna kami bukanlah pengguna awal teknologi. Kami berhasil memecahkan masalah pendidikan yang penting, dan kebetulan kami menggunakan AI untuk menyelesaikannya.

Namun, salah satu tantangan yang kami hadapi adalah membuat orang tua memperlakukan pembelajaran dengan Buddy sama seriusnya dengan pembelajaran langsung — jangan melewatkan pelajaran, mengikuti jadwal, dll. Revolusi AI saat ini tampaknya membantu hal tersebut.

Menurut saya, langkah besar berikutnya bagi kami adalah mulai bekerja lebih dekat dengan guru dan sekolah. Kami menjalankan kemitraan percontohan dengan sebuah sekolah di Brasil dan mendiskusikan kemitraan dengan banyak institusi pendidikan lainnya.

Apa visi Anda untuk masa depan tutor dan pendidikan AI secara umum?

Tutor AI adalah yang terbaik dan satu-satunya cara yang terukur untuk memecahkan masalah pendidikan nomor satu umat manusia – yaitu kekurangan guru secara global. Kita membutuhkan sekitar 1 juta guru baru untuk memenuhi kebutuhan pembelajaran dasar saja. Untuk mata pelajaran yang memerlukan bimbingan 69:1, seperti pembelajaran bahasa, masalahnya jauh lebih buruk.

Revolusi AI mempercepat pengembangan tutor AI, meskipun sebagian besar guru di segmen dewasa menggunakan solusi siap pakai, sementara pembelajaran usia dini masih kurang terlayani. Kami bangga menjadi pionir bimbingan belajar AI untuk anak kecil.

Mengenai masa depan kami, Buddy awalnya adalah seorang tutor pembelajaran bahasa, namun dalam jangka panjang, Buddy akan menjadi platform bimbingan belajar AI yang mengajarkan berbagai macam mata pelajaran kepada anak-anak di bawah usia 12 tahun. Kami sudah mulai meluncurkan versi awal dari non-tutorial pertama kami. kursus bahasa – Kurikulum Persiapan Sekolah untuk anak-anak AS. Kami melihat Buddy sebagai asisten belajar anak, tumbuh bersama anak berusia 3 hingga 4 tahun dan mengajar berbagai kursus selama bertahun-tahun.

Terima kasih atas wawancaranya yang luar biasa, pembaca yang ingin belajar lebih banyak harus berkunjung sobat AI.