Amazon Mechanical Turk платит менее 40% от минимальной заработной платы в США, предполагают исследования

Результаты исследования исследователей в США и Мексике предполагают, что работники в рынке Amazon Mechanical Turk, где 75% большинства базируются в Соединенных Штатах, зарабатывают всего 2,83 доллара в час – около 39,5% от федеральной минимальной заработной платы в 7,25 доллара в час, поскольку удаленные работники тратят треть своего рабочего времени на просмотр списков запросов на работу, управление платежами и выполнение других видов «невидимого труда».

Эти выводы появились после недавнего отчета Университета Массачусетса в Амхерсте, который критиковал низкий уровень оплаты и льгот, связанных с работой «тюрком», и который характеризует экосистему AMT как низкокачественную потогонную мастерскую для недостаточно финансируемых академических исследователей.

Запущенный в 2005 году, Amazon Mechanical Turk (AMT) поставляет работникам толпы ад-хок задачи человеческого интеллекта (HIT), которые часто используются исследователями в области машинного обучения в контексте «доступных» групп изучения задач, таких как распознавание изображений, оценка обработки естественного языка (NLP) и другие систематические, программные задачи, предназначенные для помощи в формировании или тестировании алгоритмов (хотя эта услуга также широко используется для генерации спама).

Невидимый труд на MTurk

Новое исследование, озаглавленное Количественная оценка невидимого труда в работе толпы, было проведено исследователями из Северо-Восточного университета в Бостоне, Microsoft Research и Universidad Nacional Autonoma de Mexico (UNAM).

Объем невидимого труда, выполненного 100 работниками на более чем 40 000 задач HIT за одну неделю. Источник: https://arxiv.org/pdf/2110.00169.pdf

В статье подробно описывается объем «невидимого труда», который составляет 33% времени работы тюрка, как это подтверждается в полевом исследовании, проведенном для работы. Наибольшее количество «потерянного» времени было представлено временем, которое работники AMT тратят на проверку своих платежных деталей, чтобы убедиться, что они получили оплату за задачу. В отчете говорится, что «97% работников в нашем исследовании практиковали невидимый труд, посещая раздел заработка на панели управления работников (возможно, чтобы убедиться, что они получили справедливую оплату)».

Вторым по величине временем для тюрков было «гипервигильность», необходимая для получения работы, когда работники обновляют страницы профилей заказчиков и ищут новые задачи, объявленные в разделах списков задач AMT.

Мониторинг тюрков

Исследователи разработали расширение для Chrome, которое они с тех пор опубликовали на GitHub, на основе предыдущей работы, которая изучала привычки внимания работников AMT, но не касалась оценки невидимого труда. Расширение было установлено на системах 100 участвующих работников Mechanical Turk, которые коллективно выполнили 40 903 задачи HIT за одну неделю.

Основная задача расширения – оценить фактическое время, которое работник тратит на задачу HIT, и для этого оно отслеживает состояние страниц AMT, анализируя и парсируя HTML-контент страницы, на которой в настоящее время сосредоточен тюрк, чтобы понять взаимодействие работника с ней. Расширение также имеет фоновый процесс, управляемый временем, который регистрирует события браузера в домене MTurk и статус каждой страницы (т. е. активный, неактивный, закрытый).

Время, затраченное на различные задачи, включает в себя проверку статуса «квалификации» (чтобы увидеть, повысила ли недавно выполненная работа их уровень, давая им доступ к задачам более высокого качества); «просмотр и сортировку» через огромное количество объявлений о задачах с помощью поисковых фильтров, чтобы определить возможную следующую работу и исключить нежелательную работу; и фильтрацию «мошеннических» задач и общее управление/надзор за задачами в очереди.

Задержки и торможения

Система также распознает «задерживающие» события и «ложные начала», такие как когда работник возвращает ранее принятую задачу в пул задач, потому что она оказалась другой, чем он ожидал; время, затраченное на «просмотр» задач HIT или на чтение информации о задачах; отправку сообщений создателю задачи, чтобы лучше понять требования задачи; и чтение общей справки платформы из справочных страниц Mechanical Turk.

В очень трудоемкой категории «платежей» исследование показало, что работники AMT часто проверяют свою панель управления, чтобы увидеть, получили ли они оплату, поскольку возможно, что выполненная работа может быть отклонена, неоплачена, по причинам, которые работник никогда не узнает; просмотр заработка, который имеет отдельный раздел на панели управления MTurk, в отличие от объявлений о новом платеже; и выполнение задач, которые «истекают» – когда работник не успевает выполнить задачу в отведенное время и не получает оплаты за любую работу, выполненную над ней (категория, которую исследователи считают должна быть в разделе «платежи»).

Помимо выводов отчета, что невидимый труд снижает ранее оценочную медианную зарплату работника AMT ($3,76) на 39,5%, когда учитывается в рабочей сессии, он также отмечает, что восприятие работниками времени, которое они потратили на неплатную работу во время сессии, заметно ниже, чем показывают мониторинговые сессии.

Авторы отмечают, что они округлили все оценки в своих методологических выводах, чтобы обеспечить строго «консервативный» подход к работе и избежать обвинений в преувеличении выводов. Они заключили:

«Учитывая, что медианная почасовая заработная плата работников составляет всего 3,76 доллара (без учета невидимого труда), rõчно, что работникам толпы все еще нужен значительный рост заработной платы, прежде чем мы сможем считать этот труд справедливым. Однако это не только то, что должны учитывать заказчики, но и то, что должны учитывать платформы, работники и даже законодатели».

Состояние работников Mechanical Turk

Другие авторы и организации оценивают, что средний работник AMT на самом деле зарабатывает еще меньше, чем указано в новом отчете – всего 1 доллар в час.

Сторонники преимуществ AMT утверждают, с относительно высокой частотой, что споры вокруг низкой оплаты работников AMT преувеличены. Одно исследование 2020 года опросило часть работников MTurk в Соединенных Штатах и обнаружило, что «финансовое положение людей на MTurk отражает общую популяцию», и что тюрки «не обменяли бы гибкость MTurk на менее чем 25 долларов в час».

Это исследование было проведено сотрудниками CloudResearch (ранее TurkPrime), чьи услуги включают «инструменты, которые позволяют исследователям проводить исследования на Mechanical Turk».

Поскольку работники AMT считаются независимыми подрядчиками, они обычно не подлежат трудовым законам в США. В опросе 2016 года Pew Research center более половины работников AMT (52%) сообщили, что они зарабатывают менее 4,99 доллара в час, что – при условии полной занятости без отпуска или больничного – эквивалентно доходу в 10 379,20 доллара в год.

Для многих работников опрос показал, что Mechanical Turk представлял «все или большую часть» их дохода, и эта категория тюрков характеризовалась молодостью, низким уровнем образования и проживанием в домохозяйствах с более низкими доходами.

Однако тюрки, согласно опросу, были в целом лучше образованы, чем средние американские работники, с 51% сообщивших, что они имеют хотя бы степень бакалавра, против 36% взрослых работников в США – при этом только 12% работников AMT утверждали, что имеют только среднее образование или ниже.

Правильные вещи?

Отчет Pew также указал, что типичные работники AMT могут быть полной противоположностью «среднего человека», которого большинство академических исследований стремятся использовать, с последствиями для степени, в которой их необычные ответы могут потенциально предвзято или ухудшить качество проектов машинного обучения, которые полагаются на тюрков.

Выводы отчета Pew гласят, что тюрки «не представляют американцев в целом – или даже работающих взрослых».

Он также ссылается на исследование 2014 года, которое показало, что работники AMT подвергаются такому количеству экспериментов и опросов, что это количество работы «могло бы приучить работников к определенным типам ответов или сделать их чрезмерно знакомыми с типами вопросов, которые им будут заданы» – по сути, что изнурительная работа AMT приведет тюрков к тому, чтобы стать экспертами в «удовлетворении системы» вместо того, чтобы предоставлять аутентичную и академически (или даже клинически) полезную информацию.