Согласно исследованию, Amazon Mechanical Turk платит менее 40% от минимальной заработной платы в США

Результаты исследования, проведенного исследователями из США и Мексики, показывают, что краудсорсинговые работники на рынке Amazon Mechanical Turk с большинством 75% базируется в Соединенных Штатах, зарабатывают всего в среднем 2.83 доллара в час, что составляет около 39.5% от установленной федеральной минимальной заработной платы в размере 7.25 доллара в час, поскольку удаленные работники тратят треть своего рабочего времени на просмотр списков запросов на работу, управление платежами и выполнение других задач. виды «невидимого труда».

Выводы приходят после Недавний доклад из Массачусетского университета в Амхерсте, который подверг критике низкий уровень оплаты и льгот, связанных с работой «туркера», и который эффективно характеризует экосистему AMT как низкокачественную потогонную мастерскую для недостаточно финансируемых академических исследователей.

Amazon Mechanical Turk (AMT), запущенная в 2005 году, предоставляет краудворкерам специальные задачи человеческого интеллекта (HIT), которые часто используются исследователями машинного обучения в контексте «доступных» исследовательских групп для таких задач, как распознавание изображений, обработка естественного языка (NLP). оценка и другие систематические программные задачи, призванные помочь сформулировать или протестировать алгоритмы (хотя эта услуга также широко используется). генерировать спам).

Невидимый труд на MTurk

Новый Исследование, Под названием Количественная оценка невидимого труда в толпе, было проведено исследователями из Северо-восточного университета в Бостоне, Microsoft Research и Национального автономного университета Мексики (UNAM).

Объем невидимого труда, выполняемого 100 работниками при выполнении более 40,000 XNUMX задач HIT в течение одной недели. Источник: https://arxiv.org/pdf/2110.00169.pdf

В документе подробно описывается объем «невидимого труда», который составляет 33% рабочего времени туркера, о чем свидетельствует полевое исследование, проведенное для этой работы. Наибольшее количество «потерянного» времени было представлено количеством времени, которое сотрудники AMT тратят на проверку своих платежных реквизитов, чтобы убедиться, что они получили оплату за задачу. В отчете говорится, что «97% работников в нашем исследовании практиковали невидимый труд при посещении раздела доходов на панели инструментов своих работников (возможно, чтобы убедиться, что им справедливо платят)»..

Второй по величине потерей времени для туркеров была «сверхбдительность», необходимая для фактического получения работы, когда рабочие обновляют страницы профилей запрашивающих и ищут новые задачи, рекламируемые в разделах списков AMT HIT.

Мониторинг турок

Исследователи разработали расширение для Chrome, которым они пользуются с тех пор. доступен на GitHub, основанный на предварительная работа в котором изучались привычки внимания работников AMT, но не рассматривалась оценка невидимого труда. Расширение было установлено на системах 100 участников Mechanical Turk, которые в совокупности выполнили 40,903 XNUMX HIT в течение одной недели.

Основная задача расширения — оценить фактическое время, которое работник тратит на задачу HIT, и с этой целью оно отслеживает состояние страниц, связанных с AMT, путем очистки и анализа HTML-содержимого страницы, на которой в данный момент сосредоточен туркер. , чтобы понять взаимодействие работника с ним. Расширение также включает управляемый временем фоновый процесс, который регистрирует события браузера в домене MTurk и статус каждой страницы (т. е. активна, неактивна, закрыта).

Отнимающие много времени аспекты, отслеживаемые в рамках этой системы, включают в себя проверку работниками статуса «квалификации» (чтобы увидеть, «повысила» ли их недавно выполненная работа, предоставив им доступ к более качественным HIT); «пробираться и сортировать» лавину сообщений HIT с поисковыми фильтрами, чтобы определить возможную следующую работу и исключить нежелательную работу; и отфильтровывать «мошеннические» HITS и в целом управлять/отслеживать стоящие в очереди HIT.

Задержки и перетаскивания

Система также распознает «запаздывающие» события и «фальстарты», например, когда работник возвращает ранее принятое задание в пул HIT, потому что оно оказалось отличным от его ожиданий; время, затраченное на «предварительный просмотр» HIT или чтение информации о HIT; отправлять сообщения создателю HIT, чтобы лучше понять требования задачи; и чтение общей справки по платформе на страницах справки Mechanical Turk.

Что касается очень трудоемкой категории «платежей», исследование показало, что работники AMT часто проверяли, была ли им оплачена работа, чтобы проверить, была ли им оплачена работа, поскольку выполненная работа может быть отклонена, не оплачена, по причинам, которые работник никогда не говорить; просмотр своих заработков, для которых есть специальный раздел на панели инструментов MTurk, в отличие от объявлений о новом платеже; и выполнение HIT с «тайм-аутом» - когда работник не может выполнить HIT в отведенное время и не получает оплаты за любую выполненную над ним работу (категория, которую, по мнению исследователей, следует включить в раздел «платежи»).

Помимо выводов отчета о том, что невидимый труд снижает ранее оцененные медианная заработная плата (3.76 доллара США) работника AMT на 39.5% с учетом рабочей сессии, также отмечается, что восприятие работниками того, сколько времени они потратили на неоплачиваемую работу во время сессии, заметно ниже, чем показывают сеансы мониторинга.

Авторы отмечают, что они округлили все оценки в своих методологических выводах, чтобы обеспечить строго «консервативный» подход к работе и избежать обвинений в преувеличении результатов. Они заключают:

«Учитывая, что средняя почасовая заработная плата рабочих составляет всего 3.76 доллара (без учета невидимого труда), становится ясно, что краудфандинговым работникам по-прежнему требуется резкое повышение их заработной платы, прежде чем мы сможем рассматривать эту ярмарку труда. Однако это должны учитывать не только заказчики, но и платформы, работники и даже политики».

Положение рабочих-турок-механиков

Другие авторы и организации считают, что средний работник AMT на самом деле зарабатывает даже меньше, чем оценивается в новом отчете – всего лишь $ 1 час.

Сторонники преимуществ AMT относительно часто утверждают, что споры о низком вознаграждении работников AMT преувеличены. Один Исследование с 2020 года опросил часть рабочих MTurk в США и обнаружил, что 'Финансовое положение людей на MTurk отражает положение населения в целом', и что туркеры «не променял бы гибкость MTurk менее чем на 25 долларов в час».

Эту работу провели сотрудники CloudResearch (ранее TurkPrime), чьи услуги включают «инструменты, позволяющие исследователям проводить исследования на Mechanical Turk».

Поскольку работники AMT считаются независимыми подрядчиками, они обычно не подпадают под действие трудового законодательства США. В 2016 году , По данным исследовательского центра Pew, более половины работников AMT (52%) сообщили, что зарабатывают менее 4.99 долларов в час, что при условии работы полный рабочий день без отпусков и больничных эквивалентно доходу в 10,379.20 XNUMX долларов в год.

Опрос показал, что для многих рабочих механический турок представлял «все или большую часть» их дохода, и эта категория туркеров была обычно моложе, менее образованной и жила в домохозяйствах с более низкими доходами.

Тем не менее, согласно опросу, туркеры в целом были более образованны, чем средние американские рабочие: 51% сообщили, что у них есть как минимум высшее образование, по сравнению с 36% взрослых рабочих в США, и только 12% работников AMT заявили иметь только высшее образование или меньше.

Правильные вещи?

В отчете Pew также указано, что типичные работники AMT могут быть полной противоположностью «среднему человеку», которого большинство академических исследований стремятся использовать, с последствиями для степени, в которой их необычные ответы могут потенциально исказить или ухудшить качество проектов машинного обучения. которые полагаются на турок.

В выводах отчета Pew говорится, что туркеры «не являются репрезентативными для американцев в целом или даже для работающих взрослых».

Он также отмечает исследование из более раннего (2014 г.) Исследование, что указывало на то, что работники АМТ подвергаются такому количеству экспериментов и опросов, что количество этого вида работ «может приучить работников к определенным типам ответов или сделать их слишком знакомыми с типами вопросов, которые им будут задавать» – фактически то, что рутинная работа в области AMT будет склонять туркеров к тому, чтобы стать экспертами в том, чтобы «угодить системе», а не предоставлять аутентичные и академические (или даже клинически) полезный вклад.