Pemimpin pemikiran

Era Baru Impersonasi Eksekutif Tidak Akan Melibatkan Eksekutif

mm
Tambahkan Unite.AI ke sumber pilihan Anda di Google

Selama beberapa tahun terakhir, ancaman digital terbesar yang dihadapi merek adalah impersonasi eksekutif, sering kali dilakukan melalui alamat email yang dipalsukan atau akun media sosial palsu. Hari ini, kita menghadapi musuh yang lebih kompleks dan meyakinkan: agen AI.

Munculnya agen otonom yang ditenagai oleh model bahasa besar (LLM), dirancang untuk beroperasi dengan sedikit atau tanpa intervensi manusia, telah membuka kemungkinan baru yang mirip dengan kegembiraan yang terlihat di era web2 dan aplikasi mobile awal.

Meskipun agen otonom yang benar-benar belum membuat lompatan dari visi ke kenyataan, para ahli memperingatkan mereka mungkin dapat beroperasi di jaringan perusahaan secepat tahun depan. Kegembiraan dan adopsi yang mengikuti pasti akan jatuh ke radar penjahat cyber yang terus beradaptasi, yang melihat agen otonom sebagai frontier baru untuk penipuan digital. Jadi, apa yang terjadi ketika agen-agen ini dipalsukan? Atau lebih buruk, ketika mereka menjadi pelaku pemalsuan?

Sama seperti aplikasi mobile yang pernah menghadapi banjir versi palsu yang dibangun untuk mengekstrak kredensial login atau menginstal malware, agen AI sekarang siap menghadapi gelombang penipuan yang serupa. Kali ini, bagaimanapun, risiko akan lebih sulit dideteksi, dan kerusakannya berpotensi lebih luas.

Dari Impersonasi Eksekutif ke Pemalsuan Agen

AI telah membuka jalan baru untuk penipuan dan penipuan, yang ditandai dengan penipuan pemalsuan suara yang dapat merekam pola bicara eksekutif menggunakan hanya beberapa detik audio, misalnya, dan baru-baru ini, bukti penipuan video dan suara waktu nyata telah dilaporkan. Sekarang, bayangkan agen otonom, yang seharusnya mewakili perusahaan Anda, berinteraksi dengan pelanggan, investor, atau mitra. Agen tersebut dapat disematkan pada situs web, terintegrasi dengan chatbot, atau bahkan berinteraksi melalui email, menawarkan interaksi yang masuk akal, profesional, dan sepenuhnya palsu.

Pendahulu agen palsu mungkin terletak pada model ” jailbreak“, yang mana aktor ancaman memanipulasi LLM, sering kali melalui injeksi prompt atau teknik multi-turn, untuk menghasilkan output yang berbahaya atau palsu. Tapi ini hanya awal.

Menurut data dari PitchBook, perusahaan AI mengumpulkan $131,5 miliar pada 2024, yang merupakan lebih dari sepertiga dari total kesepakatan modal ventura global. Perlombaan AI, yang ditenagai oleh pendiri ambisius, investor yang lapar, dan pemerintah yang ingin tahu, akan segera mempercepat kemampuan teknologi yang muncul ini, yang kasus penggunaan yang sah akan terus dieksploitasi untuk tujuan jahat.

AI generatif telah dan akan terus mendemokratisasi pembuatan agen tersebut. Ketika platform berlomba untuk mengintegrasikannya, sedikit garda yang ada untuk memverifikasi keaslian mereka. Ini membuka pintu untuk kelas baru pemalsuan: tidak hanya orang, tetapi juga perangkat lunak.

Panggilan Bangun untuk Merek yang Bersemangat dan Konsumen yang Penasaran

Konsumen dan merek sama-sama baru saja memahami apa yang dimaksud dengan mempercayai agen. Tapi kepercayaan adalah kunci dari setiap interaksi digital, dan ketika itu rusak, konsekuensinya dapat berbahaya.

Seperti yang diamati dengan video deepfake dan pemalsuan suara, agen palsu dapat digunakan untuk:

  • Mengajukan pembayaran atau data sensitif dengan berpura-pura sebagai merek yang mapan atau tepercaya
  • Mengalihkan pengguna ke situs web yang berisi malware melalui DM media sosial atau iklan berbayar
  • Mengikis kepercayaan pelanggan dan memicu kerusakan reputasi secara besar-besaran

Menurut laporan terbaru dari Komisi Perdagangan Federal Amerika Serikat, penipuan pemalsuan bertanggung jawab atas kerugian yang dilaporkan sebesar hampir $3 miliar di Amerika Serikat saja – angka yang diharapkan akan meningkat tajam karena pemalsuan AI menjadi lebih mulus dan dapat diakses.

Penyebaran Agen Palsu: Iklan, Pencarian, dan Media Sosial

Apa yang sangat berbahaya adalah bagaimana agen palsu akan disebarkan. Mereka tidak memerlukan situs web atau domain mereka sendiri untuk mendapatkan pengaruh. Pelaku jahat dapat, dan melakukan, menggunakan hasil pencarian berbayar dan platform media sosial untuk mempromosikan klon palsu dari merek, eksekutif, atau produk tepercaya. Sebuah tautan sponsor di Google atau postingan promosi di Instagram, misalnya, cukup untuk mengalihkan pengguna yang tidak curiga ke agen palsu atau portal dukungan.

Resiko tingkat ekosistem ini, di mana pelaku jahat mengambil alih properti digital yang sah untuk memfasilitasi penipuan, memerlukan sekolah baru untuk keamanan siber. Tidak cukup lagi untuk melindungi jaringan Anda, awan atau mengamankan kredensial karyawan Anda. Perimeter ancaman merek Anda sekarang termasuk setiap jaringan iklan, platform pencarian, dan alat pihak ketiga yang berinteraksi dengan pelanggan Anda.

Mengambil Tindakan Sebelum Terlambat

Kita memasuki dunia di mana garis antara manusia dan agen semakin kabur. Ancaman tidak lagi hanya pemalsuan orang, yang saat ini berada pada pertumbuhan eksponensial karena alat AI yang tersedia, tetapi pemalsuan persona digital.

Jadi, bagaimana bisnis dapat mempersiapkan diri?

  1. Petakan kehadiran digital merek Anda: Ketahui di mana pelanggan berinteraksi dengan perusahaan Anda dan agen Anda – apakah di situs web, melalui API, atau melalui pihak ketiga – dan secara aktif memantau titik-titik masuk tersebut untuk upaya pemalsuan.
  2. Monitor ekosistem agen yang muncul: Ketika pasar terbuka dan platform agen (seperti Hugging Face Spaces) mendapatkan popularitas, waspada terhadap kemiripan atau fork dari alat Anda yang muncul di tempat lain.
  3. Kurangi waktu-ke-detect (TTD) dan waktu-ke-perbaikan (TTR): Gunakan solusi yang memungkinkan untuk mengidentifikasi dan menghapus pelaku pemalsuan dengan cepat, terutama mereka yang menyalahgunakan iklan berbayar atau platform media sosial, sangat penting untuk membatasi kerusakan.
  4. Edukasi pengguna Anda: Bangun transparansi ke dalam pengalaman agen Anda. Pengguna Anda harus memahami di mana dan bagaimana mereka harus berinteraksi dengan alat Anda, dan bagaimana mengenali bendera merah.
  5. Tetapkan protokol autentikasi agen: Bekerja menuju verifikasi berbasis kriptografi atau metadata yang dapat mengonfirmasi asal dan legitimasi agen.

Solusi terletak pada mengamankan ekosistem agen AI, bukan menghindarinya. Sama seperti kita telah belajar untuk memverifikasi domain, mengautentikasi email, dan memeriksa aplikasi mobile di masa lalu, kita sekarang perlu memperluas tingkat kesadaran yang sama ke dunia agen AI. Jika kita tidak mengatasi pemalsuan agen sekarang, kita mungkin segera menemukan diri kita berbicara dengan asisten yang terlihat familiar yang bekerja untuk pihak lain.

Yoav Keren, CEO dan Co-founder dari BrandShield, memiliki 24 tahun pengalaman dalam manajemen keuangan, pemasaran, dan pengembangan bisnis. Ia saat ini merupakan anggota komite anti-pemalsuan di INTA dan sebelumnya merupakan Anggota Dewan di ICANN. Yoav pernah menjadi penasihat senior untuk seorang menteri di pemerintah Israel dan merupakan kepala cabang Teknologi dari Departemen Keamanan Informasi militer Israel. Ia memegang gelar MBA dari sekolah bisnis Kellogg & Recanati (Northwestern University & Universitas Tel-Aviv) dan gelar BA dalam Ekonomi dan Fisika dari Universitas Tel-Aviv.