Model dan platform AI

GPT-2, Pembangkit Teks Kecerdasan Buatan Dilepas Penuh

mm
Diterbitkan
Diperbarui
Tambahkan Unite.AI ke sumber pilihan Anda di Google

Seperti TheNextWeb (TNW) melaporkan, OpenAI, organisasi nirlaba di balik sejumlah proyek kecerdasan buatan telah menerbitkan model terakhir dalam rilis bertahap yang direncanakan untuk GPT-2, pembangkit teks yang telah memicu perdebatan sejak pengumuman peluncurannya pada Februari.

Berdasarkan makalah penelitian OpenAI yang berjudul Language Models are Unsupervised Multitask Learners, “GPT-2 menggunakan pembelajaran mesin untuk menghasilkan teks berdasarkan input terbatas.” Artinya, pengguna dapat mengetikkan kalimat atau dua kalimat tentang subjek apa pun dan generator AI akan menghasilkan teks yang terkait dengan input asli. Pada dasarnya, seperti yang dicatat TNW, tidak seperti kebanyakan ‘pembangkit teks’ yang mengeluarkan string yang sudah ditulis sebelumnya. GPT-2 membuat teks yang tidak ada sebelumnya.”

Dalam tweet-nya, Scott B. Weingart, direktur program Perpustakaan Universitas Carnegie Mellon memberikan contoh konkret:

 

OpenAI awalnya khawatir tentang kemungkinan penggunaan sistem mereka yang tidak sah sehingga pada Februari 2019 mereka memutuskan untuk melepas GPT-2 dalam empat bagian selama delapan bulan. Seperti yang mereka jelaskan dalam blog mereka, “Karena kekhawatiran kami tentang aplikasi jahat dari teknologi ini, kami tidak melepas model yang dilatih. Sebagai eksperimen dalam pengungkapan yang bertanggung jawab, kami malah melepas model yang jauh lebih kecil untuk peneliti bereksperimen, serta makalah teknis.”

Seperti yang dijelaskan, model lengkap berisi 1,5 miliar parameter. “Semakin banyak parameter yang digunakan dalam model, semakin ‘pintar’ model tersebut tampaknya – seperti manusia, latihan membuat sempurna.”

TNW mencatat bahwa awalnya OpenAI melepas model dengan 124 juta parameter yang kemudian diikuti oleh pelepasan dengan 355 dan 774 juta. Menurut mereka, setelah menguji model yang dirilis, “setiap iterasi menunjukkan perbaikan kemampuan yang signifikan dibandingkan dengan iterasi sebelumnya.”

Untuk mencegah penyalahgunaan OpenAI melepas model deteksi GPT-2 yang direncanakan “untuk mengatasi penyalahgunaan secara proaktif.” Menurut pengakuan mereka sendiri dalam sebuah pos blog, model deteksi ini masih memerlukan pekerjaan tambahan untuk mencapai tingkat kualitas yang telah dicapai sejauh ini dalam GPT-2 itu sendiri.

Bagi mereka yang tertarik dapat mengunduh model GPT-2 di sini di Github, melihat kartu model di sini, dan membaca pos blog OpenAI di sini.

mm

Mantan diplomat dan penerjemah untuk PBB, saat ini jurnalis/penulis/peneliti lepas, fokus pada teknologi modern, kecerdasan buatan, dan budaya modern.