Connect with us

Pemimpin pemikiran

Celah Kepercayaan Agentic AI Adalah Ancaman Nyata terhadap Pengalaman Pelanggan

mm

Janji agentic AI untuk mengubah pengalaman pelanggan (CX) tidak dapat disangkal. Platform CX yang ditenagai AI berkembang pesat ke pasar global, dengan perkiraan bahwa itu akan mencapai USD 117,8 miliar pada tahun 2034, didorong oleh permintaan sistem otomatis yang menyampaikan personalisasi dan efisiensi operasional yang ditingkatkan.

Tapi agentic AI memperkenalkan ketidakpastian. Di lingkungan CX langsung, percakapan dapat bercabang ke arah tak terhingga, didorong oleh konteks, data, dan pengambilan keputusan waktu nyata yang tidak dapat diprediksi sepenuhnya oleh skrip tes statis.

Organisasi mulai menemukan bahwa kemampuan AI saja tidak diterjemahkan menjadi kepercayaan pelanggan, loyalitas, atau penciptaan nilai. Hambatan terbesar yang menghentikan agentic AI dari mencapai potensinya ada terpisah dari kinerja model dan kecepatan adopsi. Hambatan itu adalah kepercayaan pelanggan.

Polanya yang Familiar dari Era Internet Awal

Ledakan AI mengikuti pola dari bab yang familiar dalam sejarah teknologi. Pada awal hari internet, organisasi terburu-buru untuk mengirim perangkat lunak lebih cepat daripada mereka dapat mengamankannya, menskalakannya, atau mengelola mode kegagalannya. Inovasi melampaui infrastruktur, dan kualitas layanan menjadi pemikiran kedua. Celah itu akhirnya menyebabkan pelanggaran keamanan, gangguan layanan, dan reset yang menyakitkan seputar tata kelola dan pengujian.

Agentic AI berisiko mengulangi siklus itu. Perusahaan mengirim sistem otonom yang semakin meningkat ke dalam perjalanan pelanggan tanpa memvalidasi bagaimana sistem tersebut berperilaku di bawah kondisi dunia nyata. Banyak agen AI berperforma baik dalam demonstrasi yang dikendalikan dan lingkungan pengujian yang terbatas, tetapi kemudian gagal ketika menangani input pelanggan yang kacau, data pelanggan yang tidak terorganisir, konstrain kepatuhan, dan penyerahan antar kanal.

Karena kegagalan ini, ada celah kepercayaan yang membesar antara pelanggan dan merek. Pelanggan mengalami kegagalan ini segera, sementara pemimpin hanya melihatnya setelah churn, eskalasi, atau kerusakan reputasi muncul.

Pelanggan Kehilangan Kesabaran dengan Kegagalan AI

Penelitian konsumen terbaru menyoroti betapa rapuhnya kepercayaan dalam pengalaman pelanggan yang didorong AI. Penelitian Cyara baru menunjukkan bahwa 79% konsumen meningkatkan ke agen manusia setelah bot gagal hanya sekali, dan 61% mengatakan bahwa kesalahan AI lebih frustrasi daripada kesalahan manusia.

Temuan penelitian mengungkapkan kebenaran yang lebih dalam. Pelanggan tidak menolak otomatisasi secara keseluruhan. Mereka menolak otomatisasi yang tidak dapat diandalkan. Ketika sistem AI gagal, itu tidak menerima kesabaran yang sama yang sering diberikan pelanggan kepada agen manusia yang membuat kesalahan. Jendela toleransi untuk kegagalan otomatis jauh lebih kecil.

Kehilangan kepercayaan ini secara langsung mempengaruhi hasil bisnis dan pemangku kepentingan. Churn pelanggan yang dapat dihindari biayanya $136 miliar setiap tahunnya di AS, menurut penelitian dari CallMiner. Biaya untuk kegagalan AI terus tumbuh sambil menciptakan gesekan tambahan, interaksi berulang, dan eskalasi paksa pelanggan.

Personalisasi Tanpa Keandalan Bumerang

Personalisasi tetap menjadi salah satu penggerak terkuat investasi CX. Studi Twilio menemukan bahwa 89% pemimpin bisnis melihat personalisasi sebagai kunci untuk mengemudi kesuksesan selama tiga tahun ke depan. AI memainkan peran sentral dalam membuat personalisasi dapat ditingkatkan di seluruh jutaan interaksi.

Risiko personalisasi menjadi lebih parah ketika organisasi kekurangan sistem yang andal untuk mendukung operasi. Respon yang dipersonalisasi yang gagal untuk mencocokkan situasi, atau mengalami halusinasi, terasa lebih invasif daripada yang generik. Sistem AI yang menampilkan kepercayaan diri melalui respon mereka akan kehilangan kepercayaan pelanggan ketika mereka menghasilkan hasil yang salah atau konflik.

Penelitian HubSpot mendukung sensitivitas ini. Menurut HubSpot, 90% pelanggan menilai respon “segera” sebagai penting atau sangat penting ketika mereka memiliki pertanyaan layanan pelanggan. Sistem AI yang memaksa pelanggan ke dalam loop, autentikasi berulang, atau penyerahan yang tidak perlu menghancurkan harapan tersebut.

Ketika AI membuang waktu pelanggan, itu melemahkan efisiensi yang diharapkan organisasi untuk dicapai.

Ilusi Kendali di Dalam Perusahaan

Di dalam perusahaan besar, agentic AI sering melibatkan banyak tim, vendor, dan kanal. Satu sistem menangani deteksi niat. Yang lain mengelola komunikasi. Yang ketiga memicu alur kerja atau persetujuan.

Pengujian individual dari setiap tim menciptakan ilusi kendali dan tidak membuktikan perjalanan pelanggan lengkap, yang tetap tidak divalidasi. Pemimpin kekurangan visibilitas ke dalam bagaimana sistem otonom berperilaku ketika semua interaksi pada saat yang sama di bawah tekanan pelanggan yang nyata.

Tingkat risiko di industri yang diatur bahkan lebih tinggi. Di bidang kesehatan, agen AI harus menavigasi aturan privasi, persyaratan kepatuhan, dan kebijakan merek khusus sambil merespons secara waktu nyata. Satu kegagalan dapat menciptakan paparan hukum atau risiko reputasi yang melebihi efisiensi yang diperoleh. Hanya satu contoh halusinasi AI ketika memberikan rekomendasi dosis, misalnya, dapat menyebabkan risiko keamanan pelanggan.

Mengobati AI sebagai Sistem Kritis Misi

Bisnis perlu mengubah cara mereka berpikir tentang era agentic. AI memerlukan tingkat perlakuan yang sama dengan sistem penting lainnya yang beroperasi terus-menerus, bukan sebagai implementasi tunggal.

Sistem kritis misi adalah:

  • Dilindungi dengan pengujian dan validasi terus-menerus
  • Dimonitor di produksi dan tidak dianggap stabil
  • Dikendalikan dengan akuntabilitas yang jelas, bukan didistribusikan dengan ketidakpastian

Agentic AI beroperasi melalui kemampuannya untuk menciptakan respon dinamis. Model belajar, beradaptasi, dan berinteraksi dengan input yang tidak terduga. Artinya, metode pengujian saat ini sebelum peluncuran produk tidak memberikan hasil yang memadai. Yang penting adalah bagaimana AI berperforma seiring waktu melalui kanal yang berbeda selama periode tekanan tinggi.

Organisasi yang sukses akan memvalidasi kinerja AI di seluruh perjalanan pelanggan, bukan mengevaluasi model dalam isolasi. Mereka akan menguji bagaimana agen AI merespons ketika sistem gagal, ketika pelanggan mengubah niat di tengah percakapan, atau ketika batasan regulasi ditantang.

Kepercayaan Adalah Pengganda Nilai Nyata

Meskipun inovasi yang cepat, celah antara janji AI dan dampak AI bertahan karena kepercayaan belum mengimbangi. Pelanggan mempercayai sistem yang dapat diandalkan, dapat diprediksi, dan menghormati waktu mereka. Karyawan mempercayai sistem yang dapat mereka pahami dan sesuaikan ketika diperlukan. Regulator mempercayai sistem yang dapat diaudit dan dikendalikan.

Tanpa kepercayaan, adopsi AI macet, ketidakpuasan pelanggan meningkat, karyawan mengabaikan otomatisasi, dan pemimpin kehilangan kepercayaan pada penggunaan mereka sendiri.

Perusahaan yang menutup celah kepercayaan ini akan menemukan nilai sebenarnya dari agentic AI. Kemajuan akan bergantung pada pendekatan yang disiplin terhadap keandalan ketika sistem AI menjadi lebih otonom, dan praktik validasi yang lebih dalam yang terus-menerus menguji, memantau, dan mengoptimalkan perjalanan pelanggan di seluruh kanal—a konsep yang dikenal sebagai asuransi CX.

Penggunaan agentic AI menghadapi risiko terbesar ketika tata kelola eksperimental bertahan di lingkungan yang menghadap pelanggan. Fase berikutnya dari kematangan AI akan ditentukan oleh organisasi yang mengoperasikan kepercayaan sebagai disiplin. Dalam pengalaman pelanggan, disiplin itu menentukan apakah sistem tetap tangguh ketika harapan meningkat dan pengawasan meningkat.

Seth Johnson adalah Chief Technology Officer di Cyara. Dengan lebih dari 20 tahun pengalaman di bidang software dan teknologi kepemimpinan, Seth membawa pendekatan pragmatis, berpusat pada orang, untuk membangun tim berkinerja tinggi, menskala platform AI, dan memimpin inisiatif transformasi kompleks. Sebelum bergabung dengan Cyara, Seth menjabat sebagai chief technology officer di LINQ, di mana ia bertanggung jawab untuk membentuk strategi teknologi perusahaan untuk mendukung pertumbuhan dan inovasi di ruang pendidikan K-12. Karirnya meliputi teknik, operasi, dan arsitektur, dengan keahlian mendalam di SaaS, komputasi awan, dan pengembangan karyawan.