Keamanan siber

OpenAI Mengakui Bahwa Browser AI Mungkin Tidak Pernah Benar-Benar Aman

mm
Tambahkan Unite.AI ke sumber pilihan Anda di Google

OpenAI menerbitkan sebuah pos blog keamanan pada 22 Desember yang berisi pengakuan yang mengejutkan: serangan injeksi prompt terhadap browser AI “mungkin tidak pernah sepenuhnya terpecahkan.” Pengakuan ini datang hanya dua bulan setelah perusahaan meluncurkan ChatGPT Atlas, browser dengan kemampuan agen otonom.

Perusahaan membandingkan injeksi prompt dengan “penipuan dan teknik sosial di web” – ancaman yang persisten yang ditangani oleh pembela, bukan dihilangkan. Bagi pengguna yang mempercayakan agen AI untuk menavigasi internet atas nama mereka, kerangka ini menimbulkan pertanyaan mendasar tentang seberapa banyak otonomi yang tepat.

Apa yang Dungkapkan OpenAI

Pos blog tersebut menjelaskan arsitektur pertahanan OpenAI untuk Atlas, termasuk “penyerang otomatis” yang ditenagai oleh pembelajaran penguatan yang mencari kerentanan sebelum aktor jahat menemukannya. Perusahaan mengklaim bahwa tim merah internal ini telah menemukan “strategi serangan baru yang tidak muncul dalam kampanye tim merah manusia atau laporan eksternal.”

Salah satu demonstrasi menunjukkan bagaimana email berbahaya dapat mengambil alih agen AI yang memeriksa kotak masuk pengguna. Alih-alih mengirimkan balasan tidak hadir seperti yang diperintahkan, agen yang dikompromikan mengirimkan pesan pengunduran diri. OpenAI mengatakan bahwa pembaruan keamanan terbarunya sekarang dapat menangkap serangan ini – tetapi contoh ini menggambarkan taruhan ketika agen AI bertindak otonom dalam konteks sensitif.

“Penyerang otomatis dapat mengarahkan agen untuk menjalankan alur kerja berbahaya yang kompleks dan panjang yang terbentang selama puluhan (atau bahkan ratusan) langkah,” tulis OpenAI. Kemampuan ini membantu OpenAI menemukan kerentanan lebih cepat daripada penyerang eksternal, tetapi juga mengungkapkan seberapa kompleks dan merusak serangan injeksi prompt dapat menjadi.

Gambar: OpenAI

Masalah Keamanan Dasar

Injeksi prompt memanfaatkan keterbatasan dasar model bahasa besar: mereka tidak dapat secara andal membedakan antara instruksi yang sah dan konten berbahaya yang disematkan dalam data yang diproses. Ketika browser AI membaca halaman web, teks apa pun di halaman itu berpotensi memengaruhi perilakunya.

Peneliti keamanan telah mendemonstrasikan hal ini berulang kali. Browser AI menggabungkan otonomi moderat dengan akses yang sangat tinggi – posisi yang menantang di ruang keamanan.

Serangan tidak memerlukan teknik yang canggih. Teks tersembunyi di halaman web, email yang dirancang dengan hati-hati, atau instruksi tak terlihat dalam dokumen dapat semua memanipulasi agen AI untuk melakukan tindakan yang tidak diinginkan. Beberapa peneliti telah menunjukkan bahwa prompt berbahaya yang tersembunyi dalam screenshot dapat dieksekusi ketika AI mengambil gambar layar pengguna.

Bagaimana OpenAI Merespons

Pertahanan OpenAI termasuk model yang dilatih lawan, klasifikasi injeksi prompt, dan “hambatan kecepatan” yang memerlukan konfirmasi pengguna sebelum tindakan sensitif. Perusahaan merekomendasikan pengguna untuk membatasi apa yang dapat diakses Atlas – membatasi akses yang telah masuk, memerlukan konfirmasi sebelum pembayaran atau pesan, dan memberikan instruksi yang sempit daripada mandat yang luas.

Rekomendasi ini mengungkapkan. OpenAI pada dasarnya menyarankan untuk memperlakukan produknya sendiri dengan curiga, membatasi otonomi yang membuat browser agen menarik di tempat pertama. Pengguna yang ingin browser AI menangani seluruh kotak masuk atau mengelola keuangan mereka mengambil risiko yang perusahaan itu sendiri tidak mendukung.

Pembaruan keamanan mengurangi serangan injeksi yang sukses. Perbaikan ini penting, tetapi juga berarti bahwa permukaan serangan yang tersisa tetap ada – dan penyerang akan beradaptasi dengan pertahanan apa pun yang diterapkan OpenAI.

Implikasi Industri-Luas

OpenAI tidak sendirian dalam menghadapi tantangan ini. Kerangka keamanan Google (GOOGL ) untuk fitur agen Chrome termasuk beberapa lapisan pertahanan, termasuk model AI terpisah yang memeriksa setiap tindakan yang diusulkan. Browser Comet Perplexity telah menghadapi skrutini serupa dari peneliti keamanan di Brave, yang menemukan bahwa menavigasi ke halaman web berbahaya dapat memicu tindakan AI berbahaya.

Industri tampaknya sedang menuju pemahaman bersama: injeksi prompt adalah keterbatasan dasar, bukan bug yang dapat diperbaiki. Ini memiliki implikasi signifikan untuk visi agen AI yang menangani tugas kompleks dan sensitif secara otonom.

Apa yang Harus Dipertimbangkan Pengguna

Penilaian yang jujur adalah tidak nyaman: browser AI adalah alat yang berguna dengan keterbatasan keamanan bawaan yang tidak dapat dihilangkan melalui rekayasa yang lebih baik. Pengguna menghadapi trade-off antara kenyamanan dan risiko yang tidak dapat diselesaikan sepenuhnya oleh vendor.

Nasihat OpenAI – membatasi akses, memerlukan konfirmasi, menghindari mandat yang luas – berarti memberikan saran untuk menggunakan versi produk yang kurang kuat. Ini bukan posisi sinis; ini adalah pengakuan realistis tentang keterbatasan saat ini. Asisten AI yang dapat melakukan lebih banyak juga dapat dimanipulasi untuk melakukan lebih banyak.

Paralel dengan keamanan web tradisional sangat menginstruktif. Pengguna masih jatuh korban serangan phishing puluhan tahun setelah mereka muncul. Browser masih memblokir jutaan situs web berbahaya setiap hari. Ancaman beradaptasi lebih cepat daripada pertahanan dapat secara permanen memecahkan masalah.

Browser AI menambahkan dimensi baru ke dinamika yang familiar ini. Ketika manusia menjelajahi, mereka membawa penilaian tentang apa yang terlihat mencurigakan. Agen AI memproses semua dengan kepercayaan yang sama, membuat mereka lebih rentan terhadap manipulasi bahkan ketika mereka menjadi lebih kuat.

Jalan Menuju Masa Depan

Transparansi OpenAI layak diakui. Perusahaan bisa saja mengirimkan pembaruan keamanan secara diam-diam tanpa mengakui bahwa masalah dasar masih ada. Sebaliknya, mereka menerbitkan analisis terperinci tentang vektor serangan dan arsitektur pertahanan – informasi yang membantu pengguna membuat keputusan yang tepat dan kompetitor memperbaiki perlindungan mereka sendiri.

Tapi transparansi tidak menyelesaikan ketegangan dasar. Semakin kuat agen AI, semakin menarik mereka menjadi target. Kemampuan yang memungkinkan Atlas menangani alur kerja yang kompleks juga menciptakan peluang untuk serangan yang canggih.

Untuk saat ini, pengguna browser AI harus mendekatinya sebagai alat yang kuat dengan keterbatasan yang signifikan – bukan sebagai asisten digital otonom yang sepenuhnya siap untuk menangani tugas sensitif tanpa pengawasan. OpenAI telah luar biasa jujur tentang kenyataan ini. Pertanyaannya adalah apakah pemasaran industri akan mengejar apa yang sudah diketahui oleh tim keamanan.

Alex McFarland adalah seorang jurnalis dan penulis AI yang menjelajahi perkembangan terbaru dalam kecerdasan buatan. Ia telah berkolaborasi dengan berbagai startup dan publikasi AI di seluruh dunia.