Connect with us

Amazon Mechanical Turk Plătește Mai Puțin de 40% din Salariul Minim pe Oră din SUA, Sugerează Cercetarea

Inteligență artificială

Amazon Mechanical Turk Plătește Mai Puțin de 40% din Salariul Minim pe Oră din SUA, Sugerează Cercetarea

mm

Rezultatele unui studiu realizat de cercetători din SUA și Mexic sugerează că lucrătorii crowdsourciți din piața Amazon Mechanical Turk, cu o majoritate de 75% cu sediul în Statele Unite, câștigă cât mai puțin 2,83 dolari pe oră – aproximativ 39,5% din salariul minim federal de 7,25 dolari pe oră, deoarece lucrătorii la distanță petrec o treime din timpul de muncă scanând liste de solicitări de lucru, gestionând plățile și efectuând alte tipuri de “muncă invizibilă”.

Acest lucru vine în urma unui raport recent de la Universitatea din Massachusetts Amherst, care a criticat nivelul scăzut de plată și beneficii implicate în a fi un “turker”, și care caracterizează eficient infrastructura AMT ca o atelier de lucru de calitate scăzută pentru cercetători academici subfinanțați.

Lansat în 2005, Amazon Mechanical Turk (AMT) oferă crowdworkerilor sarcini de inteligență umană ad hoc (HIT), des utilizate de cercetătorii de învățare automată în contextul unor “grupuri de studiu accesibile” pentru sarcini precum recunoașterea imaginilor, evaluarea procesării limbajului natural (NLP) și alte sarcini sistemice și programatice concepute pentru a ajuta la formularea sau testarea algoritmilor (deși serviciul este utilizat și pe scară largă pentru a genera spam).

Munca Invizibilă pe MTurk

Noul studiu, intitulat Quantifying the Invisible Labor in Crowd Work, a fost realizat de cercetători de la Universitatea Northeastern din Boston, Microsoft Research și Universidad Nacional Autonoma de Mexico (UNAM).

Extinderea muncii invizibile efectuate de 100 de lucrători pe peste 40.000 de sarcini HIT într-o perioadă de o săptămână. Sursă: https://arxiv.org/pdf/2110.00169.pdf

Extinderea muncii invizibile efectuate de 100 de lucrători pe peste 40.000 de sarcini HIT într-o perioadă de o săptămână. Sursă: https://arxiv.org/pdf/2110.00169.pdf

Articolul detaliază extinderea “muncii invizibile” care constituie 33% din timpul de muncă al unui turker, așa cum este evidențiat într-un studiu de teren întreprins pentru lucrare. Cea mai mare cantitate de “timp pierdut” a fost reprezentată de timpul pe care lucrătorii AMT îl petrec examinând detaliile de plată pentru a se asigura că au primit plata pentru o sarcină. Raportul afirmă că ‘97% dintre lucrătorii din studiul nostru au practicat muncă invizibilă în jurul vizitării secțiunii de câștiguri din panoul de control al lucrătorilor (poate pentru a se asigura că au fost plătiți corect)’.

Al doilea cel mai mare consumator de timp pentru turkeri a fost “vigilența excesivă” necesară pentru a obține efectiv lucru, unde lucrătorii reîmprospătează paginile profilurilor solicitatorilor și căutau sarcini noi anunțate în secțiunile de liste HIT ale AMT.

Monitorizarea Turkerilor

Cercetătorii au dezvoltat o extensie Chrome, pe care au făcut-o disponibilă pe GitHub, pe baza lucrării anterioare care a studiat obiceiurile de atenție ale lucrătorilor AMT, dar care nu a abordat evaluarea muncii invizibile. Extensia a fost instalată pe sistemele a 100 de lucrători Mechanical Turk participanți, care au efectuat colectiv 40.903 HIT-uri într-o perioadă de o săptămână.

Principala sarcină a extensiei este de a evalua timpul real petrecut de un lucrător pe o sarcină HIT și, în acest scop, monitorizează starea paginilor AMT prin scraparea și analiza conținutului HTML al unei pagini pe care turkerul o are în vedere, pentru a înțelege interacțiunile lucrătorului cu aceasta. Extensia are, de asemenea, un proces de fundal condus de timp care înregistrează evenimente de browser pe domeniul MTurk și starea fiecărei pagini (de exemplu, activă, inactivă, închisă).

Aspectele care consumă timp și sunt monitorizate în acest sistem includ verificarea stării “calificărilor” (pentru a vedea dacă lucrul recent finalizat i-a “upgradat”, oferindu-le acces la HIT-uri de calitate superioară); “înotul și sortarea” prin avalanșa de postări HIT cu filtre de căutare pentru a identifica un posibil următor loc de muncă și a exclude munca nedorită; și filtrarea HIT-urilor “frauduloase” și gestionarea/monitorizarea în general a HIT-urilor așteptate.

Întârzieri și Rezistență

Sistemul recunoaște, de asemenea, “evenimente întârziate” și “începuturi false”, cum ar fi atunci când un lucrător returnează o sarcină acceptată anterior în piscina HIT pentru că s-a dovedit a fi diferită de așteptări; timpul necesar pentru a “previzualiza” HIT-urile, sau pentru a citi informații despre HIT-uri; pentru a trimite mesaje către originatorul HIT pentru a înțelege mai bine cerințele sarcinii; și citirea ajutorului general al platformei de pe paginile de ajutor ale Mechanical Turk.

În categoria foarte consumatoare de timp a “plăților”, cercetarea a constatat că lucrătorii AMT erau adesea la panoul de control pentru a verifica dacă au fost plătiți, deoarece este posibil ca lucrul finalizat să fie respins, neplătit, din motive pe care lucrătorul nu le va afla niciodată; vizualizarea câștigurilor, care au o secțiune dedicată în panoul de control MTurk, în contrast cu anunțurile despre o nouă plată; și efectuarea de HIT-uri care “expiră” – unde un lucrător nu reușește să finalizeze un HIT în timpul alocat și nu primește plată pentru niciunul dintre lucrările efectuate pe el (o categorie pe care cercetătorii o consideră că ar trebui să fie în secțiunea “plăți”).

Pe lângă constatările raportului că munca invizibilă reduce salariul mediu estimat anterior al unui lucrător AMT ($3,76) cu 39,5% atunci când este luat în considerare într-o sesiune de lucru, se menționează și că percepția lucrătorilor cu privire la cât timp au petrecut cu munca neplătită într-o sesiune este semnificativ mai mică decât arată sesiunile de monitorizare.

Autorii notează că au rotunjit toate estimările din constatările metodologice pentru a asigura o abordare “conservatoare” riguroasă a lucrării și pentru a evita acuzațiile de exagerare a constatărilor. Ei conchid:

‘Având în vedere că salariul mediu orar al lucrătorilor este de doar 3,76 dolari (fără a lua în considerare munca invizibilă), este clar că lucrătorii de mulțime încă au nevoie de o creștere dramatică a salariilor lor înainte de a putea considera această muncă corectă. Cu toate acestea, acest lucru nu este ceva ce doar solicitatorii ar trebui să ia în considerare, ci și ceva pentru platforme, lucrători și chiar pentru factorii de decizie politică.’

Starea Lucrătorilor Mechanical Turk

Alți autori și organizații estimează că lucrătorul mediu AMT câștigă, de fapt, și mai puțin decât se estimează în raportul nou – cât mai puțin 1 dolar pe oră.

Susținătorii beneficiilor AMT susțin, cu o frecvență relativă, că controversele legate de remunerația slabă a lucrătorilor AMT sunt exagerate. Un studiu din 2020 a chestionat o secțiune de lucrători MTurk din Statele Unite, constatând că ‘situația financiară a oamenilor de pe MTurk reflectă populația generală’, și că turkerii ‘nu ar schimba flexibilitatea MTurk pentru mai puțin de 25 de dolari pe oră’.

Această lucrare a fost realizată de angajați ai CloudResearch (fost TurkPrime), ale căror servicii includ “unelte care permit cercetătorilor să ruleze studii pe Mechanical Turk”.

Deoarece lucrătorii AMT sunt considerați a fi contractori independenți, ei nu sunt, de obicei, acoperiți de legile muncii din SUA. Într-un sondaj din 2016 realizat de centrul de cercetare Pew, mai mult de jumătate dintre lucrătorii AMT (52%) au raportat că câștigă mai puțin de 4,99 dolari pe oră, ceea ce – presupunând o muncă cu normă întreagă, fără vacanțe sau concedii medicale – este echivalent cu un venit de 10.379,20 dolari pe an.

Pentru mulți lucrători, sondajul a constatat că Mechanical Turk reprezintă “toată sau cea mai mare parte” a venitului lor, iar această categorie de turkeri a fost caracterizată de tineri, mai puțin educați și care trăiesc în gospodării cu venituri mai mici.

Cu toate acestea, turkerii au fost, conform sondajului, în general mai bine educați decât lucrătorii americani medii, cu 51% raportând că au cel puțin o diplomă de absolvire a facultății, față de 36% dintre lucrătorii adulți din SUA – cu doar 12% dintre lucrătorii AMT afirmând că au doar o diplomă de liceu sau mai puțin.

Lucrurile Corecte?

Raportul Pew a indicat, de asemenea, că lucrătorii AMT tipici pot fi exact opusul “persoanei medii” pe care majoritatea studiilor academice o urmăresc să o exploateze, cu implicații pentru măsura în care răspunsurile lor neobișnuite ar putea potențial să influențeze sau să degradeze calitatea proiectelor de învățare automată care se bazează pe turkeri.

Constatările raportului Pew afirmă că turkerii ‘nu sunt reprezentativi pentru americanii în general – sau chiar pentru adulții care lucrează’.

De asemenea, se menționează o cercetare dintr-un studiu anterior (2014), care a indicat că lucrătorii AMT sunt supuși unor experimente și sondaje atât de multe, încât cantitatea acestui tip de muncă ‘ar putea condiționa lucrătorii la anumite tipuri de răspunsuri sau să-i facă prea familiarizați cu tipurile de întrebări pe care le vor primi’ – în esență, că muncitorul AMT va înclina să devină expert în “a mulțumi sistemul” mai degrabă decât a oferi intrări autentice și utilă din punct de vedere academic (sau chiar clinic).

Scriitor pe machine learning, specialist în domeniul sintezei de imagini umane. Foster head of research content la Metaphysic.ai.