Stummel Laut einer Studie zahlt Amazon Mechanical Turk weniger als 40 % des US-Mindestlohns – Unite.AI
Vernetzen Sie sich mit uns

Artificial Intelligence

Laut einer Studie zahlt Amazon Mechanical Turk weniger als 40 % des US-Mindestlohns

mm
Aktualisiert on

Die Ergebnisse einer Studie von Forschern in den USA und Mexiko legen nahe, dass Crowdsourcing-Arbeiter auf dem Amazon Mechanical Turk-Marktplatz mit einer Mehrheit von 75 % tätig sind mit Sitz in den Vereinigten StaatenSie verdienen durchschnittlich nur 2.83 US-Dollar pro Stunde – etwa 39.5 % des vorgeschriebenen bundesstaatlichen Mindestlohns von 7.25 US-Dollar pro Stunde, da die Telearbeiter ein Drittel ihrer Arbeitszeit damit verbringen, Listen mit Arbeitsanfragen zu scannen, Zahlungen zu verwalten und andere Dinge zu erledigen Arten von „unsichtbarer Arbeit“.

Die Erkenntnisse stammen aus einer kürzlich erschienenen Bericht von der University of Massachusetts Amherst, die das niedrige Gehaltsniveau und die Sozialleistungen kritisiert, die ein „Turker“ mit sich bringt, und die die AMT-Ökostruktur effektiv als minderwertige Ausbeutungsstätte für unterfinanzierte akademische Forscher charakterisiert.

Amazon Mechanical Turk (AMT) wurde 2005 ins Leben gerufen und versorgt Crowdworker mit Ad-hoc-Human-Intelligence-Aufgaben (HITs), die häufig von Forschern des maschinellen Lernens im Rahmen „erschwinglicher“ Lerngruppen für Aufgaben wie Bilderkennung und Verarbeitung natürlicher Sprache (NLP) eingesetzt werden. Evaluierung und andere systematische, programmatische Aufgaben, die dazu dienen, Algorithmen zu formulieren oder zu testen (obwohl der Dienst auch häufig genutzt wird). um Spam zu erzeugen).

Unsichtbare Arbeit auf MTurk

The new Studie, Betitelt Quantifizierung der unsichtbaren Arbeit in der Crowd-Arbeit, wurde von Forschern der Northeastern University in Boston, Microsoft Research und der Universidad Nacional Autonoma de Mexico (UNAM) durchgeführt.

Das Ausmaß der unsichtbaren Arbeit, die von 100 Arbeitern bei über 40,000 HIT-Aufgaben über einen Zeitraum von einer Woche geleistet wurde. Quelle: https://arxiv.org/pdf/2110.00169.pdf

Das Ausmaß der unsichtbaren Arbeit, die von 100 Arbeitern bei über 40,000 HIT-Aufgaben über einen Zeitraum von einer Woche geleistet wurde. Quelle: https://arxiv.org/pdf/2110.00169.pdf

Das Papier beschreibt detailliert das Ausmaß der „unsichtbaren Arbeit“, die 33 % der Arbeitszeit eines Türken ausmacht, wie aus einer für diese Arbeit durchgeführten Feldstudie hervorgeht. Die größte „verlorene“ Zeit entstand durch die Zeit, die AMT-Mitarbeiter damit verbrachten, ihre Zahlungsdetails zu prüfen, um sicherzustellen, dass sie für eine Aufgabe bezahlt wurden. Das heißt es im Bericht „97 % der Arbeitnehmer in unserer Studie übten unsichtbare Arbeit aus, indem sie den Verdienstabschnitt auf dem Dashboard ihrer Arbeitnehmer aufsuchten (vielleicht um sicherzustellen, dass sie fair bezahlt wurden)“.

Der zweitgrößte Zeitaufwand für Türken war die „übermäßige Wachsamkeit“, die erforderlich ist, um tatsächlich einen Job zu bekommen. Dabei aktualisieren die Arbeiter die Seiten der Bewerberprofile und suchen nach neuen Aufgaben, die in den AMT-HIT-Listenabschnitten ausgeschrieben werden.

Überwachung der Türken

Die Forscher entwickelten eine Chrome-Erweiterung, die sie seitdem nutzen auf GitHub verfügbar gemacht, basierend auf vorherige Arbeit das die Aufmerksamkeitsgewohnheiten von AMT-Arbeitern untersuchte, sich jedoch nicht mit der Bewertung unsichtbarer Arbeit befasste. Die Erweiterung wurde auf den Systemen von 100 teilnehmenden Mechanical Turk-Mitarbeitern installiert, die insgesamt innerhalb einer Woche 40,903 HITs durchführten.

Die Hauptaufgabe der Erweiterung besteht darin, die tatsächliche Zeit auszuwerten, die ein Mitarbeiter mit einer HIT-Aufgabe verbringt. Zu diesem Zweck überwacht sie den Status von AMT-bezogenen Seiten durch Scraping und Parsen des HTML-Inhalts einer Seite, auf die sich der Mitarbeiter gerade konzentriert , um die Interaktionen des Arbeitnehmers damit zu verstehen. Die Erweiterung verfügt außerdem über einen zeitgesteuerten Hintergrundprozess, der Browserereignisse auf der MTurk-Domäne sowie den Status jeder Seite (z. B. aktiv, inaktiv, geschlossen) protokolliert.

Zu den zeitaufwändigen Aspekten, die im Rahmen dieses Systems überwacht werden, gehört die Überprüfung des „Qualifikations“-Status der Arbeitnehmer (um festzustellen, ob sie durch kürzlich abgeschlossene Arbeiten „aufgewertet“ wurden und ihnen Zugang zu HITs von besserer Qualität verschafft haben); „Waten und Sortieren“ durch eine Lawine von HIT-Beiträgen mit Suchfiltern, um einen möglichen nächsten Job zu identifizieren und unerwünschte Arbeit auszuschließen; und das Herausfiltern „betrügerischer“ HITs und die allgemeine Verwaltung/Überwachung von HITs in der Warteschlange.

Verzögerungen und Verzögerungen

Das System erkennt auch „verzögernde“ Ereignisse und „Fehlstarts“, beispielsweise wenn ein Mitarbeiter eine zuvor angenommene Aufgabe an den HIT-Pool zurückgibt, weil sich herausstellt, dass sie von seinen Erwartungen abweicht; die Zeit, die benötigt wird, um HITs in der Vorschau anzuzeigen oder Informationen über die HITs zu lesen; um Nachrichten an den HIT-Urheber zu senden, um die Anforderungen der Aufgabe besser zu verstehen; und Lesen der allgemeinen Plattformhilfe auf den Hilfeseiten von Mechanical Turk.

In der sehr zeitaufwändigen Kategorie „Zahlungen“ ergab die Untersuchung, dass AMT-Mitarbeiter häufig an ihrem Dashboard nachschauten, ob sie bezahlt wurden, da es möglich ist, dass abgeschlossene Arbeiten aus Gründen, die der Mitarbeiter will, unbezahlt abgelehnt werden niemals erzählt werden; Anzeigen ihrer Einnahmen, die über einen eigenen Bereich im MTurk-Dashboard verfügen, im Gegensatz zu Ankündigungen einer neuen Zahlung; und die Durchführung von HITs, bei denen es zu einer „Zeitüberschreitung“ kommt – bei denen ein Arbeiter einen HIT nicht in der vorgegebenen Zeit abschließt und keine Bezahlung für die daran geleistete Arbeit erhält (eine Kategorie, die nach Ansicht der Forscher im Abschnitt „Zahlungen“ enthalten sein sollte).

Neben den Erkenntnissen des Berichts, dass unsichtbare Arbeit die … senkt vorher geschätzt Der Medianlohn (3.76 US-Dollar) eines AMT-Mitarbeiters um 39.5 %, wenn er in eine Arbeitssitzung einbezogen wird, stellt außerdem fest, dass die Wahrnehmung der Arbeitnehmer darüber, wie viel Zeit sie während einer Sitzung für unbezahlte Arbeit aufgewendet haben, deutlich geringer ist, als die Überwachungssitzungen zeigen.

Die Autoren weisen darauf hin, dass sie alle Schätzungen in ihren methodischen Ergebnissen abgerundet haben, um einen strikt „konservativen“ Ansatz bei der Arbeit sicherzustellen und den Vorwurf der Übertreibung der Ergebnisse zu vermeiden. Sie kommen zu dem Schluss:

„Wenn man bedenkt, dass der durchschnittliche Stundenlohn der Arbeiter nur 3.76 US-Dollar beträgt (ohne Berücksichtigung unsichtbarer Arbeit), ist klar, dass Crowdworker noch eine dramatische Lohnerhöhung benötigen, bevor wir diese Arbeitsgerechtigkeit in Betracht ziehen können.“ Dies ist jedoch nicht nur etwas, das Antragsteller berücksichtigen sollten, sondern auch etwas für Plattformen, Arbeitnehmer und sogar politische Entscheidungsträger.“

Der Zustand der mechanischen Türkenarbeiter

Andere Autoren und Organisationen schätzen, dass der durchschnittliche AMT-Arbeiter sogar weniger verdient, als im neuen Bericht geschätzt wird – nämlich nur $ 1 eine Stunde.

Befürworter der Vorteile von AMT argumentieren relativ häufig, dass die Kontroversen über die schlechte Entlohnung von AMT-Mitarbeitern übertrieben seien. Eins Studie aus dem Jahr 2020 befragte einen Teil der MTurk-Arbeiter in den Vereinigten Staaten und kam zu diesem Ergebnis „Die finanzielle Situation der Menschen auf MTurk spiegelt die der allgemeinen Bevölkerung wider.“', und diese Türken „würde die Flexibilität von MTurk nicht für weniger als 25 US-Dollar pro Stunde eintauschen“.

Diese Arbeit wurde von Mitarbeitern von CloudResearch (ehemals TurkPrime) durchgeführt, zu deren Dienstleistungen „Tools gehören, die es Forschern ermöglichen, Studien zu Mechanical Turk durchzuführen“.

Da AMT-Mitarbeiter als unabhängige Auftragnehmer gelten, unterliegen sie in den USA im Allgemeinen nicht den Arbeitsgesetzen. Im Jahr 2016 Umfrage Laut dem Pew Research Center gaben mehr als die Hälfte der AMT-Beschäftigten (52 %) an, weniger als 4.99 US-Dollar pro Stunde zu verdienen, was – unter der Annahme einer Vollzeitbeschäftigung ohne Urlaub oder Krankheitsurlaub – einem Einkommen von 10,379.20 US-Dollar pro Jahr entspricht.

Die Umfrage ergab, dass Mechanical Turk für viele Arbeitnehmer „das gesamte oder den größten Teil“ ihres Einkommens ausmachte, und diese Kategorie von Türken war typischerweise jünger, weniger gebildet und lebte in Haushalten mit geringerem Einkommen.

Laut der Umfrage waren Türken jedoch im Allgemeinen besser ausgebildet als durchschnittliche amerikanische Arbeitnehmer: 51 % gaben an, mindestens einen Hochschulabschluss zu haben, im Vergleich zu 36 % der erwachsenen Arbeitnehmer in den USA – während dies nur 12 % der AMT-Arbeiter angaben nur einen High-School-Abschluss oder weniger zu haben.

Das richtige Zeug?

Der Pew-Bericht wies auch darauf hin, dass typische AMT-Mitarbeiter möglicherweise das genaue Gegenteil der „durchschnittlichen Person“ sind, die in den meisten akademischen Studien genutzt werden soll, was Auswirkungen darauf hat, inwieweit ihre ungewöhnlichen Reaktionen möglicherweise die Qualität von maschinellen Lernprojekten beeinflussen oder verschlechtern könnten die auf Türken angewiesen sind.

Die Ergebnisse des Pew-Berichts besagen, dass Türken „sind nicht repräsentativ für die Amerikaner insgesamt – oder sogar für berufstätige Erwachsene“.

Es werden auch Forschungsergebnisse aus einer früheren Studie (2014) erwähnt. Studie, was darauf hindeutet, dass AMT-Arbeiter so vielen Experimenten und Umfragen unterzogen werden, dass die Menge dieser Art von Arbeit zunimmt „könnte die Arbeitnehmer auf bestimmte Arten von Antworten konditionieren oder dazu führen, dass sie sich übermäßig mit den Arten von Fragen vertraut machen, die ihnen gestellt werden.“ – effektiv, dass die Strapazen der AMT-Arbeit die Türken dazu veranlassen werden, Experten darin zu werden, „dem System zu gefallen“, anstatt authentisch und akademisch (oder sogar …) zu liefern klinisch) nützliche Eingabe.