Amazon Mechanical Turk Membayar Kurang dari 40% Gaji Minimum AS, Menurut Penelitian

Hasil penelitian oleh peneliti di AS dan Meksiko menunjukkan bahwa pekerja crowdsourced di pasar Amazon Mechanical Turk, dengan mayoritas 75% berbasis di Amerika Serikat, mendapatkan penghasilan sekitar $2,83 per jam – sekitar 39,5% dari gaji minimum federal yang ditetapkan sebesar $7,25 per jam, karena pekerja jarak jauh menghabiskan sepertiga waktu kerja mereka untuk memindai daftar permintaan kerja, mengelola pembayaran, dan melakukan jenis ‘pekerjaan tidak terlihat’ lainnya.

Temuan ini muncul setelah laporan terbaru dari Universitas Massachusetts Amherst, yang mengkritik tingkat gaji dan manfaat yang rendah yang terlibat dalam menjadi ‘turker’, dan yang menggambarkan ekosistem AMT secara efektif sebagai bengkel yang berkualitas rendah untuk peneliti akademis yang kurang dibiayai.

Diluncurkan pada tahun 2005, Amazon Mechanical Turk (AMT) menyediakan pekerja crowdsourced dengan tugas Human Intelligence (HIT) ad hoc, yang sering digunakan oleh peneliti pembelajaran mesin dalam konteks ‘kelompok studi yang terjangkau’ untuk tugas seperti pengenalan gambar, evaluasi Pemrosesan Bahasa Alami (NLP), dan tugas sistematis lainnya yang dirancang untuk membantu formulasi atau pengujian algoritma (meskipun layanan ini juga digunakan secara luas untuk menghasilkan spam).

Pekerjaan Tidak Terlihat di MTurk

Penelitian baru ini, yang berjudul Mengukur Pekerjaan Tidak Terlihat dalam Pekerjaan Kerumunan, dilakukan oleh peneliti dari Universitas Northeastern di Boston, Microsoft Research, dan Universidad Nacional Autonoma de Mexico (UNAM).

Jangkauan pekerjaan tidak terlihat yang dilakukan oleh 100 pekerja pada lebih dari 40.000 tugas HIT selama satu minggu. Sumber: https://arxiv.org/pdf/2110.00169.pdf

Makalah ini menjelaskan luasnya ‘pekerjaan tidak terlihat’ yang merupakan 33% dari waktu kerja seorang turker, seperti yang dibuktikan dalam studi lapangan yang dilakukan untuk pekerjaan ini. Jumlah waktu ‘hilang’ terbesar diwakili oleh jumlah waktu yang dihabiskan pekerja AMT untuk memeriksa rincian pembayaran mereka untuk memastikan bahwa mereka telah menerima pembayaran untuk tugas tersebut. Laporan tersebut menyatakan bahwa ‘97% pekerja dalam penelitian kami melakukan pekerjaan tidak terlihat sekitar mengunjungi bagian penghasilan di dasbor pekerja (mungkin untuk memastikan mereka telah dibayar secara adil)’.

Waktu terbesar kedua untuk turkers adalah ‘hiper-vigilansi’ yang diperlukan untuk benar-benar mendapatkan pekerjaan, di mana pekerja menyegarkan halaman profil pemberi kerja dan mencari tugas baru yang diiklankan di bagian daftar HIT AMT.

Mengawasi Turks

Peneliti mengembangkan ekstensi Chrome, yang sekarang tersedia di GitHub, berdasarkan pekerjaan sebelumnya yang mempelajari kebiasaan perhatian pekerja AMT, tetapi yang tidak membahas evaluasi pekerjaan tidak terlihat. Ekstensi ini dipasang pada sistem 100 pekerja Mechanical Turk yang berpartisipasi, yang secara kolektif melakukan 40.903 HIT selama satu minggu.

Tugas utama ekstensi ini adalah untuk mengevaluasi waktu sebenarnya yang dihabiskan pekerja pada tugas HIT, dan untuk itu ekstensi ini memantau keadaan halaman AMT yang terkait dengan mengikis dan menganalisis konten HTML halaman yang saat ini difokuskan oleh turker, untuk memahami interaksi pekerja dengan halaman tersebut. Ekstensi ini juga memiliki proses latar belakang yang digerakkan oleh waktu yang mencatat peristiwa browser pada domain MTurk, dan status setiap halaman (yaitu aktif, tidak aktif, ditutup).

Aspek-aspek yang memakan waktu yang dipantau dalam sistem ini termasuk pekerja memeriksa status ‘kualifikasi’ (untuk melihat apakah pekerjaan yang baru diselesaikan telah ‘mengupgrade’ mereka, memberi mereka akses ke HIT yang lebih baik); ‘berenang dan menyortir’ melalui banjir postingan HIT dengan filter pencarian untuk mengidentifikasi pekerjaan berikutnya yang mungkin, dan mengecualikan pekerjaan yang tidak diinginkan; dan menyaring ‘HIT curang’ dan umumnya mengelola/mengawasi HIT yang diantrekan.

Keterlambatan dan Keterlambatan

Sistem ini juga mengenali ‘peristiwa keterlambatan’ dan ‘awal yang salah’, seperti ketika pekerja mengembalikan tugas yang telah diterima sebelumnya ke kolam HIT karena ternyata berbeda dari harapan mereka; waktu yang dihabiskan untuk ‘pratinjau’ HIT, atau membaca informasi tentang HIT; mengirimkan pesan kepada asal HIT untuk memahami lebih baik tentang tuntutan tugas; dan membaca bantuan umum platform dari halaman bantuan Mechanical Turk.

Dalam kategori ‘pembayaran’ yang sangat memakan waktu, penelitian menemukan bahwa pekerja AMT sering kali berada di dasbor mereka untuk memeriksa apakah mereka telah dibayar, karena mungkin bagi pekerjaan yang selesai untuk ditolak, tidak dibayar, karena alasan yang tidak akan pernah diketahui oleh pekerja; memeriksa penghasilan mereka, yang memiliki bagian khusus di dasbor MTurk, berbeda dengan pengumuman tentang pembayaran baru; dan melakukan HIT yang ‘kedaluwarsa’ – di mana pekerja gagal menyelesaikan HIT dalam waktu yang ditentukan, dan tidak menerima pembayaran untuk pekerjaan yang dilakukan pada HIT (kategori yang peneliti rasakan harus ada di bagian ‘pembayaran’).

Penelitian ini juga menemukan bahwa persepsi pekerja tentang berapa banyak waktu yang mereka habiskan untuk pekerjaan tidak dibayar selama sesi kerja jauh lebih rendah daripada yang ditunjukkan oleh sesi pemantauan.

Penulis menyatakan bahwa mereka telah membulatkan semua perkiraan dalam temuan metodologis mereka untuk memastikan pendekatan yang ‘konservatif’ dan untuk menghindari tuduhan melebih-lebihkan temuan. Mereka menyimpulkan:

‘Mengingat bahwa gaji per jam median pekerja hanya $3,76 (tanpa mempertimbangkan pekerjaan tidak terlihat), jelas bahwa pekerja crowdsourced masih memerlukan kenaikan gaji yang dramatis sebelum kita dapat mempertimbangkan pekerjaan ini adil. Namun, ini bukan hanya sesuatu yang harus dipertimbangkan oleh pemberi kerja, tetapi juga oleh platform, pekerja, dan bahkan pembuat kebijakan.’

Keadaan Pekerja Mechanical Turk

Penulis lain dan organisasi memperkirakan bahwa pekerja AMT rata-rata sebenarnya mendapatkan penghasilan lebih sedikit daripada yang diperkirakan dalam laporan baru – sekitar $1 per jam.

Pendukung manfaat AMT berargumen, dengan frekuensi relatif, bahwa kontroversi sekitar remunerasi pekerja AMT yang rendah telah dilebih-lebihkan. Satu penelitian dari tahun 2020 yang melakukan survei pada sebagian pekerja MTurk di Amerika Serikat, menemukan bahwa ‘keadaan keuangan orang-orang di MTurk mencerminkan populasi umum‘, dan bahwa turkers ‘tidak akan menukar fleksibilitas MTurk dengan kurang dari $25 per jam’.

Penelitian itu dilakukan oleh karyawan CloudResearch (sebelumnya TurkPrime), yang menyediakan ‘alat yang memungkinkan peneliti untuk menjalankan studi di Mechanical Turk’.

Karena pekerja AMT dianggap sebagai kontraktor independen, mereka tidak umumnya dilindungi oleh hukum ketenagakerjaan di AS. Dalam survei tahun 2016 oleh Pusat Penelitian Pew, lebih dari setengah pekerja AMT (52%) melaporkan mendapatkan kurang dari $4,99 per jam, yang – dengan asumsi kerja penuh waktu tanpa liburan atau cuti sakit – setara dengan pendapatan $10.379,20 per tahun.

Bagi banyak pekerja, survei menemukan, Mechanical Turk mewakili ‘semua atau sebagian besar’ dari pendapatan mereka, dan kategori turkers ini biasanya lebih muda, kurang berpendidikan, dan tinggal di rumah tangga dengan pendapatan yang lebih rendah.

Namun, turkers, menurut survei, umumnya lebih berpendidikan daripada pekerja rata-rata di Amerika, dengan 51% melaporkan bahwa mereka memiliki setidaknya gelar sarjana, dibandingkan dengan 36% pekerja dewasa di AS – dengan hanya 12% pekerja AMT yang mengaku hanya memiliki ijazah sekolah menengah atau kurang.

Hal yang Tepat?

Laporan Pew juga menunjukkan bahwa pekerja AMT biasa mungkin adalah kebalikan dari ‘orang rata-rata’ yang kebanyakan studi akademis cari, dengan implikasi untuk seberapa jauh respons mereka yang tidak biasa dapat mempengaruhi atau merusak kualitas proyek pembelajaran mesin yang mengandalkan turkers.

Temuan laporan Pew menyatakan bahwa turkers ‘bukan perwakilan dari orang Amerika secara keseluruhan – atau bahkan dari pekerja dewasa’.

Penelitian juga mencatat penelitian dari studi sebelumnya (2014), yang menunjukkan bahwa pekerja AMT terkena banyak eksperimen dan survei sehingga jumlah pekerjaan ini ‘dapat mengkondisikan pekerja untuk jenis jawaban tertentu atau membuat mereka terlalu akrab dengan jenis pertanyaan yang akan mereka ajukan’ – efektif, bahwa pekerjaan AMT akan cenderung membuat turkers menjadi ahli dalam ‘memuaskan sistem’ daripada memberikan input yang autentik dan akademis (atau bahkan klinis) yang berguna.