Η γωνία του Anderson

Το Amazon Mechanical Turk Πληρώνει Λιγότερο Από 40% του Ελάχιστου Μισθού των ΗΠΑ, Υποδεικνύουν Έρευνες

mm
Προσθέστε το Unite.AI στις προτιμώμενες πηγές σας στο Google

Τα αποτελέσματα μιας μελέτης από ερευνητές στις ΗΠΑ και το Μεξικό υποδεικνύουν ότι οι εργαζόμενοι σε crowdsourced εργασίες στην αγορά του Amazon Mechanical Turk, με πλειοψηφία 75% με έδρα τις Ηνωμένες Πολιτείες, αποdělňují ως λίγο ως $2,83 την ώρα – περίπου 39,5% του καθορισμένου ομοσπονδιακού ελάχιστου μισθού των $7,25 την ώρα,既然 οι απομακρυσμένοι εργαζόμενοι περνούν ένα τρίτο του χρόνου εργασίας τους σαρώνοντας λίστες αιτημάτων εργασίας, διαχειριζόμενοι πληρωμές και εκτελώντας άλλους τύπους “αόρατης εργασίας”.

Τα ευρήματα αυτά έρχονται μετά από μια πρόσφατη αναφορά από το Πανεπιστήμιο του Μασαχουσέτης στο Άμστερνταμ, η οποία επέκρινε το χαμηλό επίπεδο αμοιβής και ωφελημάτων που εμπλέκονται στην εργασία ως “turker” και η οποία χαρακτηρίζει την οικοδομή του AMT αποτελεσματικά ως ένα χαμηλής ποιότητας εργοστάσιο για υποαπασχολημένους ακαδημαϊκούς ερευνητές.

Εκκινήθηκε το 2005, το Amazon Mechanical Turk (AMT) παρέχει στους crowdworkers ad hoc Ανθρώπινες Εργασίες Πνευματικής Ιδιοφυΐας (HITs), συχνά χρησιμοποιούμενες από ερευνητές μηχανικής μάθησης στο πλαίσιο “οικονομικών” ομάδων μελετών για εργασίες όπως αναγνώριση εικόνων, αξιολόγηση Προηγμένης Γλώσσας (NLP) και άλλες συστηματικές, προγραμματικές εργασίες που έχουν σχεδιαστεί για να βοηθήσουν στη διατύπωση ή δοκιμή αλγορίθμων (αν και η υπηρεσία χρησιμοποιείται επίσης εκτενώς για την παραγωγή spam).

Αόρατη Εργασία στο MTurk

Η νέα μελέτη, με τίτλο Quantifying the Invisible Labor in Crowd Work, διεξήχθη από ερευνητές από το Πανεπιστήμιο του Northeastern στο Βοστώνη, την Microsoft Research και το Universidad Nacional Autonoma de Mexico (UNAM).

Το μέγεθος της αόρατης εργασίας που εκτελείται από 100 εργαζόμενους σε πάνω από 40.000 εργασίες HIT κατά τη διάρκεια μιας εβδομάδας.

Το μέγεθος της αόρατης εργασίας που εκτελείται από 100 εργαζόμενους σε πάνω από 40.000 εργασίες HIT κατά τη διάρκεια μιας εβδομάδας. Πηγή: https://arxiv.org/pdf/2110.00169.pdf

Το έγγραφο περιγράφει το μέγεθος της “αόρατης εργασίας” που αποτελεί το 33% του χρόνου εργασίας ενός turker, όπως αποδεικνύεται σε μια μελέτη πεδίου που διεξήχθη για το έργο. Η μεγαλύτερη ποσότητα “χαμένου” χρόνου αντιπροσωπεύεται από το χρόνο που οι εργαζόμενοι του AMT περνούν εξετάζοντας τις λεπτομέρειες πληρωμής τους για να διασφαλίσουν ότι έχουν λάβει πληρωμή για μια εργασία. Η αναφορά αναφέρει ότι ‘97% των εργαζομένων στη μελέτη μας εξασκούσαν αόρατη εργασία γύρω από την επίσκεψη στο τμήμα κερδών στο πίνακα εργαζομένων (ίσως για να διασφαλίσουν ότι είχαν λάβει δίκαιη αμοιβή)’.

Το δεύτερο μεγαλύτερο χρονοβόρο για τους turkers ήταν η “υπερ-επιμέλεια” που απαιτείται για την απόκτηση εργασίας, όπου οι εργαζόμενοι ανανεώνουν τις σελίδες των προφίλ των αιτητών και αναζητούν νέες εργασίες που διαφημίζονται στις ενότητες HIT του AMT.

Παρακολούθηση Turk

Οι ερευνητές ανέπτυξαν μια επέκταση του Chrome, η οποία έχει δημοσιευθεί στο GitHub, βασισμένη σε προηγούμενη εργασία που μελέτησε τις συνήθειες προσοχής των εργαζομένων του AMT, αλλά η οποία δεν ασχολήθηκε με την αξιολόγηση της αόρατης εργασίας. Η επέκταση εγκαταστάθηκε στα συστήματα 100 συμμετεχόντων εργαζομένων του Mechanical Turk, οι οποίοι συλλογικά ανέλαβαν 40.903 HITs κατά τη διάρκεια μιας εβδομάδας.

Η κύρια εργασία της επέκτασης είναι να αξιολογήσει τον πραγματικό χρόνο που ένας εργαζόμενος περνά σε μια εργασία HIT και, προς το σκοπό αυτό, παρακολουθεί την κατάσταση των σελίδων του AMT αναλύοντας και αναλύοντας το περιεχόμενο HTML μιας σελίδας που ο turker είναι目前 εστιασμένος, για να κατανοήσει τις互動 του εργαζομένου με αυτή. Η επέκταση επίσης έχει μια διαδικασία φόντου που οδηγείται από τον χρόνο που καταγράφει τα γεγονότα του προγράμματος περιήγησης στο домínio του MTurk και την κατάσταση κάθε σελίδας (π.χ. ενεργό, ανενεργό, κλειστό).

Χρονοβόρες πτυχές που παρακολουθούνται σε αυτό το σύστημα περιλαμβάνουν τους εργαζόμενους που ελέγχουν την κατάσταση “προσόντων” (για να δουν αν η πρόσφατα ολοκληρωμένη εργασία τους έχει “αναβαθμίσει”, δίνοντάς τους πρόσβαση σε καλύτερες εργασίες HIT); “βαδίζοντας και ταξινομώντας” μέσα από μια πλήθη HIT με φίλτρα αναζήτησης για να ανακαλύψουν μια πιθανή επόμενη εργασία και να αποκλείσουν ανεπιθύμητη εργασία; και φιλτράροντας “απατεώνες” HIT και γενικά διαχειριζόμενοι/επιτηρούμενοι σειρές HIT.

Καθυστερήσεις και Εμπόδια

Το σύστημα επίσης αναγνωρίζει “καθυστερήσεις” και “ψευδείς εκκινήσεις”, όπως όταν ένας εργαζόμενος επιστρέφει μια προηγουμένως αποδεκτή εργασία στην πισίνα HIT επειδή αποδείχθηκε διαφορετική από τις προσδοκίες του; ο χρόνος που περνά για να “προεπισκοπήσει” HIT, ή να διαβάσει πληροφορίες για τις HIT; να στείλει μηνύματα στον δημιουργό της HIT για να κατανοήσει καλύτερα τις απαιτήσεις της εργασίας; και να διαβάσει γενική βοήθεια πλατφόρμας από τις σελίδες βοήθειας του Mechanical Turk.

Στην πολύ χρονοβόρα κατηγορία “πληρωμών”, η έρευνα βρήκε ότι οι εργαζόμενοι του AMT ήταν συχνά στο πίνακα εργαζομένων τους για να ελέγξουν αν είχαν πληρωθεί,既然 είναι δυνατό για ολοκληρωμένες εργασίες να απορριφθούν, αμείβευτες, για λόγους που ο εργαζόμενος δεν θα μάθει ποτέ; να ελέγξουν τα κέρδη τους, τα οποία έχουν một αφιερωμένο τμήμα του πίνακα εργαζομένων του MTurk, σε αντίθεση με ανακοινώσεις μιας νέας πληρωμής; και να εκτελέσουν HIT που “λήγει” – όπου ένας εργαζόμενος δεν ολοκληρώνει μια HIT στο καθορισμένο χρόνο και δεν λαμβάνει πληρωμή για οποιαδήποτε εργασία που έχει γίνει σε αυτή (μια κατηγορία που οι ερευνητές πιστεύουν ότι πρέπει να είναι στην ενότητα “πληρωμών”).

Εκτός από τα ευρήματα της αναφοράς ότι η αόρατη εργασία μειώνει τον προηγουμένως εκτιμώμενο μέσο μισθό ($3,76) ενός εργαζόμενου του AMT κατά 39,5% όταν λαμβάνεται υπόψη σε μια συνεδρία εργασίας, επίσης σημειώνει ότι η αντίληψη των εργαζομένων για το πόσο χρόνο έχουν περάσει σε αμείβευτη εργασία κατά τη διάρκεια μιας συνεδρίας είναι αξιοσημείωτα χαμηλότερη από ό,τι αποκαλύπτουν οι συνεδρίες παρακολούθησης.

Οι συγγραφείς σημειώνουν ότι έχουν στρογγυλοποιήσει όλα τα εκτιμώμενα στοιχεία στις μεθοδολογικές ευρήματά τους για να διασφαλίσουν μια αυστηρά “συντηρητική” προσέγγιση στο έργο και για να αποφύγουν κατηγορίες υπερβολής των ευρημάτων. Kết luận:

‘Εξετάζοντας ότι ο μέσος ωριαίος μισθός των εργαζομένων είναι μόνο $3,76 (χωρίς να λαμβάνεται υπόψη η αόρατη εργασία), είναι σαφές ότι οι crowd εργαζόμενοι vẫn χρειάζονται μια δραματική αύξηση των μισθών τους πριν μπορούμε να θεωρήσουμε αυτή την εργασία δίκαιη. Ωστόσο, αυτό δεν είναι μόνο κάτι που πρέπει να ληφθεί υπόψη από τους αιτούντες, αλλά και κάτι που πρέπει να ληφθεί υπόψη από τις πλατφόρμες, τους εργαζόμενους και ακόμη και τους νομοθέτες.’

Η Κατάσταση των Εργαζομένων του Mechanical Turk

Άλλοι συγγραφείς και οργανισμοί εκτιμούν ότι ο μέσος εργαζόμενος του AMT αποdělňuje ακόμη λιγότερο από ό,τι εκτιμάται στην νέα αναφορά – όσο λίγο ως $1 την ώρα.

Οι υποστηρικτές των οφελών του AMT επιχειρούν, με σχετική συχνότητα, ότι οι διαμάχες γύρω από την κακή αμοιβή των εργαζομένων του AMT είναι υπερβολικές. Μια μελέτη από το 2020 διεξήχθη σε μια ενότητα εργαζομένων του MTurk στις Ηνωμένες Πολιτείες, βρίσκοντας ότι ‘η οικονομική κατάσταση των ανθρώπων στο MTurk αντανακλά τη γενική πληθυσμό‘, και ότι οι turkers ‘δεν θα ανταλλάξουν τη ευελιξία του MTurk για λιγότερο από $25 την ώρα’.

Αυτή η εργασία διεξήχθη από υπαλλήλους της CloudResearch (πρώην TurkPrime), των οποίων οι υπηρεσίες περιλαμβάνουν “εργαλεία που επιτρέπουν στους ερευνητές να διεξάγουν μελέτες στο Mechanical Turk”.

Επειδή οι εργαζόμενοι του AMT θεωρούνται ανεξάρτητοι εργολάβοι, δεν καλύπτονται συνήθως από τους νόμους εργασίας στις Ηνωμένες Πολιτείες. Σε μια ερεύνα του 2016 από το Κέντρο Ερευνών Pew, περισσότεροι από τους μισούς εργαζόμενους του AMT (52%) ανέφεραν ότι κέρδισαν λιγότερο από $4,99 την ώρα, το οποίο – υποθέτοντας πλήρη απασχόληση χωρίς διακοπές ή άρρωστη απουσία – αντιστοιχεί σε einen ετήσιο εισόδημα $10.379,20.

Για πολλούς εργαζόμενους, η έρευνα βρήκε ότι το Mechanical Turk αντιπροσώπευε “όλη ή την περισσότερη” εργασία τους, και αυτή η κατηγορία εργαζομένων ήταν χαρακτηριστικά νεότερη, λιγότερο εκπαιδευμένη και ζούσε σε νοικοκυριά με χαμηλότερα εισοδήματα.

Ωστόσο, οι turkers ήταν, σύμφωνα με την έρευνα, γενικά πιο εκπαιδευμένοι από τον μέσο Αμερικανό εργαζόμενο, με 51% που ανέφεραν ότι έχουν τουλάχιστον πτυχίο κολλεγίου, σε σύγκριση με 36% των ενήλικων εργαζομένων στις Ηνωμένες Πολιτείες – με μόνο 12% των εργαζομένων του AMT που ισχυρίστηκαν ότι είχαν μόνο πτυχίο γυμνασίου ή λιγότερο.

Το Σωστό;

Η αναφορά του Pew επίσης υποδείκνυε ότι οι τυπικοί εργαζόμενοι του AMT μπορεί να είναι ακριβώς το αντίθετο του “μέσου ανθρώπου” που οι περισσότερες ακαδημαϊκές μελέτες επιδιώκουν να αξιοποιήσουν, με επιπτώσεις στο βαθμό με τον οποίο οι ασυνήθιστες απαντήσεις τους θα μπορούσαν να προκαλέσουν ή να υποβαθμίσουν την ποιότητα των προγραμμάτων μηχανικής μάθησης που βασίζονται σε turkers.

Τα ευρήματα της αναφοράς Pew αναφέρουν ότι οι turkers ‘δεν είναι αντιπροσωπευτικοί των Αμερικανών συνολικά – ή ακόμη και των εργαζομένων ενήλικων’.

Αναφέρει επίσης έρευνα από μια προηγούμενη (2014) μελέτη, η οποία υποδείκνυε ότι οι εργαζόμενοι του AMT υπόκεινται σε इतनές πειράματα και έρευνες που η ποσότητα αυτού του τύπου εργασίας ‘θα μπορούσε να προκαλέσει τους εργαζόμενους σε某些 τύπους απαντήσεων ή να τους κάνει υπερβολικά εξοικειωμένους με τους τύπους ερωτήσεων που θα τους ζητηθούν’ – αποτελεσματικά, ότι η δουλειά του AMT θα κάνει τους turkers να γίνουν εμπειρογνώμονες στο “να ευχαριστούν το σύστημα” αντί να παρέχουν αυθεντικές και ακαδημαϊκές (ή ακόμη και κλινικές) χρήσιμες εισροές.

Συγγραφέας σε μηχανική μάθηση, ειδικός σε σύνθεση εικόνων ανθρώπων. Πρώην επικεφαλής ερευνητικού περιεχομένου στη Metaphysic.ai, μέχρι τη διάλυση της στην DNEG's Brahma.ai.
Portfolio site: martinanderson.ai
Contact: martin@martinanderson.ai