งานวิจัยชี้ Amazon Mechanical Turk จ่ายน้อยกว่า 40% ของค่าแรงขั้นต่ำของสหรัฐฯ

ผลการศึกษาโดยนักวิจัยในสหรัฐฯ และเม็กซิโกชี้ว่า กลุ่มคนทำงานในตลาด Amazon Mechanical Turk ซึ่งส่วนใหญ่มีถึง 75% อยู่ในประเทศสหรัฐอเมริกามีรายได้เพียงค่ามัธยฐานเพียง 2.83 ดอลลาร์ต่อชั่วโมง หรือประมาณ 39.5% ของค่าจ้างขั้นต่ำของรัฐบาลกลางที่ 7.25 ดอลลาร์ต่อชั่วโมง เนื่องจากพนักงานที่ทำงานจากระยะไกลใช้เวลาทำงานหนึ่งในสามในการสแกนรายการคำของาน ​​จัดการการชำระเงิน และดำเนินการอื่นๆ ประเภทของ 'แรงงานที่มองไม่เห็น'

การค้นพบเกิดขึ้นจาก รายงานล่าสุด จากมหาวิทยาลัยแมสซาชูเซตส์ แอมเฮิสต์ ซึ่งวิจารณ์ระดับค่าจ้างและสวัสดิการต่ำที่เกี่ยวข้องกับการเป็น 'ไก่งวง' และแสดงลักษณะโครงสร้างระบบนิเวศของ AMT ได้อย่างมีประสิทธิภาพว่าเป็นโรงกลั่นที่มีคุณภาพต่ำสำหรับนักวิจัยด้านการศึกษาที่ได้รับทุนสนับสนุนน้อย

Amazon Mechanical Turk (AMT) เปิดตัวในปี 2005 ให้บริการงานข่าวกรองมนุษย์ (HIT) เฉพาะกิจแก่พนักงานฝูงชน ซึ่งมักใช้ประโยชน์โดยนักวิจัยด้านการเรียนรู้ของเครื่องในบริบทของกลุ่มการศึกษาที่ "ราคาไม่แพง" สำหรับงานต่างๆ เช่น การจดจำภาพ การประมวลผลภาษาธรรมชาติ (NLP) การประเมินผล และงานเชิงโปรแกรมที่เป็นระบบอื่นๆ ที่ออกแบบมาเพื่อช่วยกำหนดหรือทดสอบอัลกอริธึม (แม้ว่าจะใช้บริการนี้อย่างกว้างขวางก็ตาม เพื่อสร้างสแปม).

แรงงานล่องหนบน MTurk

ใหม่ ศึกษา, ชื่อ การหาปริมาณแรงงานที่มองไม่เห็นในงานมวลชนดำเนินการโดยนักวิจัยจาก Northeastern University ที่บอสตัน Microsoft Research และ Universidad Nacional Autonoma de Mexico (UNAM)

ขอบเขตของแรงงานล่องหนที่ดำเนินการโดยคนงาน 100 คนในงาน HIT มากกว่า 40,000 งานในช่วงหนึ่งสัปดาห์ ที่มา: https://arxiv.org/pdf/2110.00169.pdf

เอกสารนี้ให้รายละเอียดเกี่ยวกับขอบเขตของ 'แรงงานที่มองไม่เห็น' ซึ่งคิดเป็น 33% ของเวลาทำงานของตุรกี ซึ่งเห็นได้จากการศึกษาภาคสนามสำหรับงานนี้ จำนวนเวลาที่ 'สูญเสีย' มากที่สุดแสดงด้วยระยะเวลาที่พนักงาน AMT ใช้ในการตรวจสอบรายละเอียดการชำระเงินเพื่อให้แน่ใจว่าพวกเขาได้รับเงินสำหรับงานหนึ่งๆ รายงานระบุว่า '97% ของคนงานในการศึกษาของเราฝึกแรงงานที่มองไม่เห็นในการเยี่ยมชมส่วนรายได้บนแดชบอร์ดของคนงาน (บางทีเพื่อให้แน่ใจว่าพวกเขาได้รับค่าจ้างอย่างยุติธรรม)'.

เวลาที่มากที่สุดเป็นอันดับสองสำหรับชาวเติร์กคือ 'การระแวดระวังมากเกินไป' ที่จำเป็นสำหรับการได้งานจริง ซึ่งคนงานรีเฟรชหน้าโปรไฟล์ของผู้ขอและค้นหางานใหม่ที่โฆษณาในส่วนรายชื่อ AMT HIT

การตรวจสอบเติร์ก

นักวิจัยได้พัฒนาส่วนขยายของ Chrome ซึ่งตั้งแต่นั้นเป็นต้นมา มีให้บริการที่ GitHubเมื่อพิจารณาจาก งานก่อนหน้า ที่ศึกษาพฤติกรรมความสนใจของคนงาน AMT แต่ไม่ได้กล่าวถึงการประเมินแรงงานที่มองไม่เห็น ส่วนขยายนี้ได้รับการติดตั้งบนระบบของคนงาน Mechanical Turk ที่เข้าร่วม 100 คน ซึ่งทำงานร่วมกัน 40,903 HITs ในช่วงหนึ่งสัปดาห์

ภารกิจหลักของส่วนขยายคือการประเมินเวลาจริงที่ผู้ปฏิบัติงานใช้ในงาน HIT และด้วยเหตุนี้ส่วนขยายจึงตรวจสอบสถานะของเพจที่เกี่ยวข้องกับ AMT โดยการคัดลอกและแยกวิเคราะห์เนื้อหา HTML ของเพจที่ turker กำลังโฟกัสอยู่ เพื่อให้เข้าใจปฏิสัมพันธ์ของผู้ปฏิบัติงานกับมัน ส่วนขยายนี้ยังมีกระบวนการพื้นหลังตามเวลาที่บันทึกกิจกรรมของเบราว์เซอร์บนโดเมน MTurk และสถานะของแต่ละหน้า (เช่น ใช้งานอยู่ ไม่ใช้งาน ปิด)

แง่มุมที่ใช้เวลานานซึ่งได้รับการตรวจสอบภายใต้ระบบนี้รวมถึงผู้ปฏิบัติงานที่ตรวจสอบสถานะ 'คุณสมบัติ' (เพื่อดูว่างานที่เสร็จสิ้นเมื่อเร็ว ๆ นี้มีการ 'อัปเกรด' หรือไม่ ทำให้พวกเขาสามารถเข้าถึง HIT ที่มีคุณภาพดีขึ้นได้) 'ลุยและคัดแยก' ผ่านการโพสต์ HIT อย่างถล่มทลายด้วยตัวกรองการค้นหาเพื่อระบุงานต่อไปที่เป็นไปได้ และไม่รวมงานที่ไม่ต้องการ และกรอง HITS ที่ 'ฉ้อฉล' และโดยทั่วไปจะจัดการ/ตรวจสอบ HIT ที่อยู่ในคิว

ความล่าช้าและการลาก

ระบบยังจดจำเหตุการณ์ที่ 'ล่าช้า' และ 'การเริ่มต้นที่ผิดพลาด' เช่น เมื่อผู้ปฏิบัติงานส่งคืนงานที่รับไว้ก่อนหน้านี้ไปยังกลุ่ม HIT เนื่องจากพบว่างานนั้นแตกต่างจากที่คาดไว้ เวลาที่ใช้ในการ 'ดูตัวอย่าง' HIT หรืออ่านข้อมูลเกี่ยวกับ HIT เพื่อส่งข้อความไปยังผู้สร้าง HIT เพื่อให้เข้าใจความต้องการของงานได้ดีขึ้น และอ่านวิธีใช้แพลตฟอร์มทั่วไปจากหน้าวิธีใช้ของ Mechanical Turk

ในหมวดหมู่ 'การชำระเงิน' ที่ใช้เวลานานมาก การวิจัยพบว่าพนักงาน AMT มักจะอยู่ที่แดชบอร์ดเพื่อตรวจสอบว่าพวกเขาได้รับค่าจ้างหรือไม่ เนื่องจากเป็นไปได้ที่งานที่เสร็จสมบูรณ์จะถูกปฏิเสธ ไม่ได้รับค่าจ้าง ด้วยเหตุผลที่ว่าพนักงานจะ ไม่เคยถูกบอก; การดูรายรับซึ่งมีส่วนเฉพาะของแดชบอร์ดของ MTurk ซึ่งตรงข้ามกับการประกาศการชำระเงินใหม่ และทำ HIT ที่ 'หมดเวลา' - เมื่อพนักงานทำ HIT ไม่เสร็จตามเวลาที่กำหนด และไม่ได้รับค่าจ้างสำหรับงานที่ทำเสร็จ (หมวดหมู่ที่นักวิจัยรู้สึกว่าควรอยู่ในส่วน 'การจ่ายเงิน')

นอกจากการค้นพบของรายงานที่ว่าแรงงานที่มองไม่เห็นยังช่วยลด ประเมินไว้ก่อนหน้านี้ ค่าจ้างเฉลี่ย ($3.76) ของพนักงาน AMT เพิ่มขึ้น 39.5% เมื่อพิจารณาในเซสชันการทำงาน นอกจากนี้ ยังตั้งข้อสังเกตด้วยว่าการรับรู้ของคนงานเกี่ยวกับเวลาที่พวกเขาใช้ไปกับงานที่ไม่ได้รับค่าจ้างในระหว่างเซสชันนั้นต่ำกว่าเซสชันการติดตามที่เปิดเผยอย่างเห็นได้ชัด

ผู้เขียนสังเกตว่าพวกเขาได้ปัดเศษประมาณการทั้งหมดในการค้นพบระเบียบวิธีของพวกเขาเพื่อให้มั่นใจว่าแนวทาง 'อนุรักษ์นิยม' อย่างเคร่งครัดในการทำงาน และเพื่อหลีกเลี่ยงข้อกล่าวหาของการค้นพบที่เกินจริง พวกเขาสรุป:

'เมื่อพิจารณาว่าค่าจ้างรายชั่วโมงเฉลี่ยของคนงานอยู่ที่ 3.76 เหรียญสหรัฐ (โดยไม่พิจารณาถึงแรงงานที่มองไม่เห็น) เป็นที่ชัดเจนว่าคนงานจำนวนมากยังคงต้องการค่าจ้างที่เพิ่มขึ้นอย่างมากก่อนที่เราจะพิจารณางานมหกรรมแรงงานนี้ได้ อย่างไรก็ตาม นี่ไม่ใช่แค่สิ่งที่ผู้ร้องขอจะต้องพิจารณาเท่านั้น แต่ยังรวมถึงสิ่งที่แพลตฟอร์ม ผู้ปฏิบัติงาน และแม้แต่ผู้กำหนดนโยบายด้วย'

สถานะของคนงานจักรกลเติร์ก

ผู้เขียนและองค์กรอื่น ๆ ประมาณการว่าพนักงาน AMT โดยเฉลี่ยจริง ๆ แล้วมีรายได้น้อยกว่าที่ประเมินไว้ในรายงานฉบับใหม่ – เพียงน้อยนิด $ 1 ชั่วโมง.

ผู้เสนอผลประโยชน์ของ AMT โต้แย้งด้วยความถี่สัมพัทธ์ว่าการโต้เถียงเกี่ยวกับค่าตอบแทนที่ไม่ดีของพนักงาน AMT นั้นมากเกินไป หนึ่ง ศึกษา จากการสำรวจในปี 2020 ส่วนหนึ่งของคนงาน MTurk ของสหรัฐอเมริกาพบว่า 'สถานการณ์ทางการเงินของผู้คนใน MTurk สะท้อนถึงประชากรทั่วไป' และไก่งวงนั่น 'จะไม่แลกเปลี่ยนความยืดหยุ่นของ MTurk ในราคาต่ำกว่า $25 ต่อชั่วโมง'.

งานนี้ดำเนินการโดยพนักงานที่ CloudResearch (เดิมคือ TurkPrime) ซึ่งบริการต่างๆ รวมถึง "เครื่องมือที่ช่วยให้นักวิจัยทำการศึกษาเกี่ยวกับ Mechanical Turk"

เนื่องจากพนักงานของ AMT ถือเป็นผู้รับจ้างอิสระ จึงไม่ได้รับการคุ้มครองโดยทั่วไปในกฎหมายแรงงานในสหรัฐอเมริกา ในปี 2016 การสำรวจ โดยศูนย์วิจัยพิว พนักงาน AMT มากกว่าครึ่ง (52%) รายงานว่ามีรายได้น้อยกว่า $4.99 ต่อชั่วโมง ซึ่งสมมติว่าทำงานเต็มเวลาโดยไม่มีวันหยุดหรือลาป่วย เท่ากับรายได้ $10,379.20 ต่อปี

สำหรับคนงานจำนวนมาก ผลสำรวจพบว่า Mechanical Turk เป็นตัวแทนของรายได้ 'ทั้งหมดหรือส่วนใหญ่' ของพวกเขา และ Turk ประเภทนี้มีลักษณะเฉพาะที่อายุน้อยกว่า มีการศึกษาน้อย และอาศัยอยู่ในครัวเรือนที่มีรายได้ต่ำ

อย่างไรก็ตาม จากการสำรวจพบว่าชาวเติร์กโดยทั่วไปมีการศึกษาดีกว่าแรงงานอเมริกันทั่วไป โดย 51% รายงานว่าพวกเขามีวุฒิการศึกษาระดับวิทยาลัยเป็นอย่างน้อย เทียบกับ 36% ของแรงงานผู้ใหญ่ในสหรัฐฯ โดยมีเพียง 12% ของคนงาน AMT ที่อ้างว่า ให้มีวุฒิมัธยมศึกษาตอนปลายหรือต่ำกว่าเท่านั้น

สิ่งที่ถูกต้อง?

รายงานของ Pew ยังระบุว่าพนักงาน AMT ทั่วไปอาจตรงกันข้ามกับ 'คนทั่วไป' ที่การศึกษาทางวิชาการส่วนใหญ่พยายามที่จะใช้ประโยชน์ โดยมีนัยถึงขอบเขตที่การตอบสนองที่ผิดปกติของพวกเขาอาจทำให้มีอคติหรือลดคุณภาพของโครงการแมชชีนเลิร์นนิง ที่อาศัยไก่งวง

ผลการวิจัยของรายงาน Pew ระบุว่าชาวเติร์ก 'ไม่ได้เป็นตัวแทนของคนอเมริกันโดยรวม หรือแม้แต่ผู้ใหญ่วัยทำงาน'.

นอกจากนี้ยังบันทึกการวิจัยจากก่อนหน้านี้ (2014) ศึกษาซึ่งระบุว่าคนงานของ AMT จะต้องผ่านการทดลองและสำรวจมากมายว่าปริมาณงานประเภทนี้ 'อาจกำหนดเงื่อนไขให้พนักงานตอบบางประเภทหรือให้พวกเขาคุ้นเคยกับประเภทของคำถามที่จะถูกถามมากเกินไป' – อย่างมีประสิทธิภาพ การบดขยี้ของงาน AMT จะโน้มน้าวให้ชาวเติร์กกลายเป็นผู้เชี่ยวชาญที่ 'ทำให้ระบบพอใจ' แทนที่จะให้ข้อมูลที่แท้จริงและเป็นวิชาการ (หรือแม้แต่ ทางคลินิก) ข้อมูลที่เป็นประโยชน์