Spojte se s námi

Umělá inteligence

Amazon Mechanical Turk platí méně než 40 % minimální mzdy v USA, tvrdí výzkum

mm

Výsledky studie výzkumníků v USA a Mexiku naznačují, že pracovníci využívající crowdsourcing na trhu Amazon Mechanical Turk se 75% většinou se sídlem ve Spojených státech, vydělávají v průměru pouhých 2.83 dolaru za hodinu – což je zhruba 39.5 % povinné federální minimální mzdy ve výši 7.25 dolaru za hodinu, jelikož tito pracovníci na dálku tráví třetinu své pracovní doby procházením seznamů žádostí o práci, správou plateb a vykonáváním dalších druhů „neviditelné práce“.

Nálezy přicházejí v důsledku a poslední zpráva z University of Massachusetts Amherst, který kritizoval nízkou úroveň platů a benefitů spojených s prací „turkera“ a který v podstatě charakterizuje ekostrukturu AMT jako nekvalitní dílnu pro nedostatečně financované akademické výzkumníky.

Služba Amazon Mechanical Turk (AMT), spuštěná v roce 2005, poskytuje crowdworkerům ad hoc úkoly lidské inteligence (HIT), které často využívají výzkumníci strojového učení v kontextu „ceněných“ studijních skupin pro úkoly, jako je rozpoznávání obrazů, hodnocení zpracování přirozeného jazyka (NLP) a další systematické, programové úkoly určené k formulování nebo testování algoritmů (ačkoli tato služba je také hojně využívána generovat spam).

Neviditelná práce na MTurk

Nový studovatS názvem Kvantifikace neviditelné práce v davové práci, provedli vědci z Northeastern University v Bostonu, Microsoft Research a Universidad Nacional Autonoma de Mexico (UNAM).

Rozsah neviditelné práce provedené 100 pracovníky na více než 40,000 2110.00169 HIT úlohách během jednoho týdne. Zdroj: https://arxiv.org/pdf/XNUMX.pdf

Rozsah neviditelné práce provedené 100 pracovníky na více než 40,000 XNUMX HIT úlohách během jednoho týdne. Zdroj: https://arxiv.org/pdf/2110.00169.pdf

Článek podrobně popisuje rozsah „neviditelné práce“, která tvoří 33 % pracovní doby turkera, jak dokládá terénní studie provedená pro danou práci. Největší množství „ztraceného“ času představovalo množství času, které pracovníci AMT stráví kontrolou svých platebních údajů, aby se ujistili, že za daný úkol obdrželi platbu. Zpráva uvádí, že „97 % pracovníků v naší studii praktikovalo neviditelnou práci, když navštěvovalo sekci o výdělcích na svém pracovním panelu (možná proto, aby se ujistili, že dostali spravedlivou zaplaceno).“.

Druhou největší časovou ztrátou pro turkery byla „hyperbdělost“ nezbytná pro skutečné získání práce, kdy pracovníci aktualizovali stránky profilů žadatelů a vyhledávali nové pracovní pozice inzerované v sekcích s nabídkami práce AMT HIT.

Sledování Turků

Výzkumníci vyvinuli rozšíření pro Chrome, které mají od té doby k dispozici na GitHubu, na základě předchozí práce který studoval návyky pozornosti pracovníků AMT, ale který se nezabýval hodnocením neviditelné práce. Rozšíření bylo nainstalováno na systémech 100 zúčastněných pracovníků Mechanical Turk, kteří společně provedli 40,903 XNUMX HIT během jednoho týdne.

Hlavním úkolem rozšíření je vyhodnotit skutečný čas, který pracovník stráví úkolem HIT, a za tímto účelem monitoruje stav stránek souvisejících s AMT pomocí scrapingu a parsování HTML obsahu stránky, na které se pracovník aktuálně zaměřuje, aby pochopil interakce pracovníka s touto stránkou. Rozšíření také obsahuje časově řízený proces na pozadí, který zaznamenává události prohlížeče v doméně MTurk a stav každé stránky (tj. aktivní, neaktivní, zavřená).

Mezi časově náročné aspekty monitorované v rámci tohoto systému patří kontrola „kvalifikačního“ statusu pracovníků (aby se zjistilo, zda nedávno dokončená práce „zlepšila“ jejich kvalifikaci a umožnila jim přístup ke kvalitnějším žádostem o kvalifikaci (HIT); „brouzdání a třídění“ lavinou inzerátů s HIT pomocí vyhledávacích filtrů za účelem identifikace možné další práce a vyloučení nežádoucí práce; a filtrování „podvodných“ HIT a obecně správa/dohled nad žádostmi o kvalifikaci ve frontě.

Zpoždění a přetažení

Systém také rozpoznává „zpožďovací“ události a „falešné starty“, například když pracovník vrátí dříve přijatý úkol do fondu HIT, protože se ukázalo, že se lišil od jeho očekávání; čas potřebný k „náhledu“ HIT nebo ke čtení informací o HIT; k odeslání zpráv původci HIT za účelem lepšího pochopení požadavků úkolu; a k čtení obecné nápovědy k platformě ze stránek nápovědy Mechanical Turk.

V kategorii „plateb“, která je velmi časově náročná, výzkum zjistil, že pracovníci AMT často kontrolují, zda jim byla zaplacena, na svých dashboardech, protože je možné, že dokončená práce bude odmítnuta a nezaplacena z důvodů, které si pracovník sám uvědomí. nikdy neřeknu; prohlížení jejich výdělků, které má na dashboardu MTurk vyhrazenou sekci, na rozdíl od oznámení nové platby; a provádění HIT, které „vyprší“ – kdy pracovník nedokončí HIT v přiděleném čase a za vykonanou práci neobdrží žádnou platbu (kategorie, která by podle výzkumníků měla být v sekci „platby“).

Kromě zjištění zprávy, že neviditelná práce snižuje dříve odhadnuto medián mzdy (3.76 USD) pracovníka AMT o 39.5 %, pokud je započítán do pracovního období, dále se uvádí, že vnímání pracovníků toho, kolik času strávili neplacenou prací během jednoho období, je výrazně nižší, než ukazují monitorovací období.

Autoři poznamenávají, že ve svých metodologických zjištěních zaokrouhlili všechny odhady dolů, aby zajistili důsledně „konzervativní“ přístup k práci a vyhnuli se obviněním z přehánění zjištění. Uzavírají:

„Vzhledem k tomu, že medián hodinové mzdy pracovníků je pouhých 3.76 dolaru (bez započítání neviditelné práce), je zřejmé, že crowdworkeři stále potřebují dramatické zvýšení mezd, než budeme moci tento pracovní poměr považovat za spravedlivý. To však není jen něco, co by měli zvážit žadatelé, ale také platformy, pracovníci a dokonce i tvůrci politik.“

Stav mechanických tureckých dělníků

Jiní autoři a organizace odhadují, že průměrný pracovník AMT ve skutečnosti vydělává méně, než se odhaduje v nové zprávě – jen $ 1 hodinu.

Zastánci výhod AMT s relativní frekvencí argumentují, že spory kolem špatného odměňování pracovníků AMT jsou přehnané. Jeden studovat od roku 2020 zkoumal část pracovníků MTurk ve Spojených státech a zjistil, že „Finanční situace lidí na MTurk odráží běžnou populaci', a že turky „nevyměnil bych flexibilitu MTurk za méně než 25 dolarů za hodinu“.

Tuto práci provedli zaměstnanci společnosti CloudResearch (dříve TurkPrime), jejíž služby zahrnují „nástroje, které umožňují výzkumníkům provádět studie o platformě Mechanical Turk“.

Protože pracovníci AMT jsou považováni za nezávislé dodavatele, nevztahují se na ně běžně pracovní zákony v USA. V roce 2016 přehled podle Pew Research Center více než polovina pracovníků AMT (52 %) uvedla, že vydělávají méně než 4.99 USD za hodinu, což – za předpokladu práce na plný úvazek bez dovolené nebo nemocenské – odpovídá příjmu 10,379.20 XNUMX USD ročně.

Průzkum zjistil, že pro mnoho pracovníků představoval strojní turk „veškerý nebo většinu“ jejich příjmů a tato kategorie turkářů byla charakteristicky mladší, méně vzdělaní a žila v domácnostech s nižšími příjmy.

Turci však byli podle průzkumu obecně vzdělanější než průměrní američtí pracovníci, přičemž 51 % uvedlo, že má alespoň vysokoškolské vzdělání, oproti 36 % dospělých pracovníků v USA – přičemž pouze 12 % pracovníků AMT tvrdí mít pouze středoškolské vzdělání nebo nižší.

Správná věc?

Zpráva Pewova institutu rovněž naznačila, že typičtí pracovníci AMT mohou být pravým opakem „průměrného člověka“, kterého se většina akademických studií snaží využít, s důsledky pro rozsah, v jakém by jejich neobvyklé reakce mohly potenciálně zkreslit nebo snížit kvalitu projektů strojového učení, které se na turkerech spoléhají.

Závěry Pewovy zprávy uvádějí, že turci „nereprezentují Američany jako celek – ani pracující dospělé“.

Zaznamenává také výzkum z dřívějšího (2014) studovat, který naznačil, že pracovníci AMT jsou vystaveni tolika experimentům a průzkumům, že kvantita tohoto typu práce „mohlo by pracovníky podmiňovat určitými typy odpovědí nebo je nechat příliš seznámit se s typy otázek, které jim budou kladeny“ – v podstatě to znamená, že dřina práce v oblasti AMT povede k tomu, že se stali experty na „zalíbení se systému“, spíše než na poskytování autentických a akademických (nebo dokonce klinicky) užitečný vstup.