Amazon Mechanical Turk Paga Menos de 40% do Salário Mínimo dos EUA, Sugere Pesquisa

Os resultados de um estudo por pesquisadores nos EUA e no México sugerem que trabalhadores crowdsourced no mercado Amazon Mechanical Turk, com uma maioria de 75% com base nos Estados Unidos, estão ganhando tão pouco quanto uma média de $2,83 por hora – cerca de 39,5% do salário mínimo federal exigido de $7,25 por hora, desde que os trabalhadores remotos gastam um terço do seu tempo de trabalho escaneando listas de solicitações de trabalho, gerenciando pagamentos e realizando outros tipos de ‘trabalho invisível’.

As descobertas vêm após um relatório recente da Universidade de Massachusetts Amherst, que criticou o baixo nível de pagamento e benefícios envolvidos em ser um ‘turker’, e que caracteriza a ecologia AMT efetivamente como uma oficina de baixa qualidade para pesquisadores acadêmicos subfinanciados.

Lançado em 2005, o Amazon Mechanical Turk (AMT) fornece aos crowdworkers tarefas de inteligência humana ad hoc (HITs), frequentemente utilizadas por pesquisadores de aprendizado de máquina no contexto de ‘grupos de estudo acessíveis’ para tarefas como reconhecimento de imagens, avaliação de processamento de linguagem natural (NLP) e outras tarefas sistemáticas e programáticas projetadas para ajudar a formular ou testar algoritmos (embora o serviço também seja amplamente utilizado para gerar spam).

Trabalho Invisível no MTurk

O novo estudo, intitulado Quantificando o Trabalho Invisível no Trabalho de Multidão, foi realizado por pesquisadores da Northeastern University em Boston, Microsoft Research e da Universidad Nacional Autonoma de Mexico (UNAM).

A extensão do trabalho invisível realizado por 100 trabalhadores em mais de 40.000 tarefas HIT durante um período de uma semana. Fonte: https://arxiv.org/pdf/2110.00169.pdf

O artigo detalha a extensão do ‘trabalho invisível’ que constitui 33% do tempo de trabalho de um turker, como evidenciado em um estudo de campo realizado para o trabalho. A maior quantidade de ‘tempo perdido’ foi representada pelo tempo que os trabalhadores do AMT gastam examinando seus detalhes de pagamento para garantir que receberam pagamento por uma tarefa. O relatório afirma que ‘97% dos trabalhadores em nosso estudo praticaram trabalho invisível ao visitar a seção de ganhos em seu painel de trabalhadores (talvez para garantir que tenham recebido pagamento justo)’.

A segunda maior perda de tempo para os turkers foi a ‘hipervigilância’ necessária para obter trabalho, onde os trabalhadores atualizam as páginas dos perfis dos solicitantes e procuram novas tarefas anunciadas nas seções de listagem de HITs do AMT.

Monitorando os Turkers

Os pesquisadores desenvolveram uma extensão do Chrome, que eles posteriormente tornaram disponível no GitHub, com base em trabalho anterior que estudou os hábitos de atenção dos trabalhadores do AMT, mas que não abordou a avaliação do trabalho invisível. A extensão foi instalada nos sistemas de 100 trabalhadores do Mechanical Turk que participaram, que coletivamente realizaram 40.903 HITs durante um período de uma semana.

A tarefa principal da extensão é avaliar o tempo real que um trabalhador gasta em uma tarefa HIT, e para isso, ela monitora o estado das páginas relacionadas ao AMT, raspando e analisando o conteúdo HTML de uma página que o turker está atualmente focado, para entender as interações do trabalhador com ela. A extensão também apresenta um processo em segundo plano baseado em tempo que registra eventos do navegador no domínio do MTurk e o status de cada página (ou seja, ativo, inativo, fechado).

Aspectos que consomem tempo monitorados sob este sistema incluem trabalhadores verificando o status de ‘qualificações’ (para ver se o trabalho recentemente concluído os ‘promoveu’, dando-lhes acesso a HITs de melhor qualidade); ‘navegando e classificando’ por uma avalanche de postagens de HIT com filtros de pesquisa para identificar um possível próximo trabalho e excluir trabalho indesejado; e filtrando HITs ‘fraudulentos’ e geralmente gerenciando/monitorando HITs em fila.

Atrasos e Obstáculos

O sistema também reconhece ‘eventos de atraso’ e ‘falsos começos’, como quando um trabalhador retorna uma tarefa anteriormente aceita para o pool de HIT porque se revelou diferente do que ele esperava; o tempo gasto para ‘visualizar’ HITs, ou para ler informações sobre os HITs; para enviar mensagens ao originador do HIT para melhor entender as exigências da tarefa; e ler ajuda geral da plataforma do Mechanical Turk.

Na categoria de ‘pagamentos’, a pesquisa encontrou que os trabalhadores do AMT frequentemente estavam em seu painel para verificar se haviam sido pagos, desde que é possível que o trabalho concluído seja rejeitado, não pago, por razões que o trabalhador nunca será informado; visualizando seus ganhos, que têm uma seção dedicada do painel do MTurk, em vez de anúncios de um novo pagamento; e realizando HITs que ‘expiram’ – onde um trabalhador falha em concluir um HIT no tempo alocado e não recebe pagamento por qualquer trabalho realizado nele (uma categoria que os pesquisadores sentem que deve estar na seção de ‘pagamentos’).

Além das descobertas do relatório de que o trabalho invisível reduz o salário médio anteriormente estimado ($3,76) de um trabalhador do AMT em 39,5% quando fatorado em uma sessão de trabalho, também observa que a percepção dos trabalhadores de quanto tempo eles gastam em trabalho não pago durante uma sessão é notavelmente menor do que as sessões de monitoramento revelam.

Os autores observam que arredondaram todas as estimativas em suas descobertas metodológicas para garantir uma abordagem ‘conservadora’ rigorosa para o trabalho e para evitar acusações de exagero de descobertas. Eles concluem:

‘Considerando que o salário horário médio dos trabalhadores é apenas $3,76 (sem considerar o trabalho invisível), está claro que os trabalhadores da multidão ainda precisam de um aumento dramático em seus salários antes que possamos considerar este trabalho justo. No entanto, isso não é apenas algo para os solicitantes considerarem, mas também algo para as plataformas, trabalhadores e até mesmo formuladores de políticas.’

O Estado dos Trabalhadores do Mechanical Turk

Outros autores e organizações estimam que o trabalhador médio do AMT ganha ainda menos do que o estimado no novo relatório – tão pouco quanto $1 por hora.

Proponentes dos benefícios do AMT argumentam, com frequência relativa, que as controvérsias em torno da remuneração pobre dos trabalhadores do AMT são exageradas. Um estudo de 2020 pesquisou uma seção de trabalhadores do MTurk nos Estados Unidos, encontrando que ‘a situação financeira das pessoas no MTurk espelha a população em geral‘, e que os turkers ‘não trocariam a flexibilidade do MTurk por menos de $25 por hora’.

Esse trabalho foi realizado por funcionários da CloudResearch (anteriormente TurkPrime), cujos serviços incluem ‘ferramentas que permitem que os pesquisadores realizem estudos no Mechanical Turk’.

Como os trabalhadores do AMT são considerados contratantes independentes, eles não são comumente cobertos por leis trabalhistas nos EUA. Em uma pesquisa de 2016 pelo Pew Research Center, mais da metade dos trabalhadores do AMT (52%) relataram ganhar menos de $4,99 por hora, o que – supondo trabalho em tempo integral com nenhum feriado ou licença médica – é equivalente a uma renda de $10.379,20 por ano.

Para muitos trabalhadores, a pesquisa encontrou, o Mechanical Turk representava ‘tudo ou a maior parte’ de sua renda, e essa categoria de turkers era caracteristicamente mais jovem, menos educada e vivia em lares com renda mais baixa.

No entanto, os turkers eram, de acordo com a pesquisa, geralmente mais bem educados do que os trabalhadores americanos médios, com 51% relatando que têm pelo menos um diploma de faculdade, contra 36% dos trabalhadores adultos nos EUA – com apenas 12% dos trabalhadores do AMT alegando ter apenas um diploma de ensino médio ou menos.

A Coisa Certa?

O relatório do Pew também indicou que os trabalhadores típicos do AMT podem ser exatamente o oposto da ‘pessoa média’ que a maioria dos estudos acadêmicos busca aproveitar, com implicações para a extensão com que suas respostas incomuns podem potencialmente enviesar ou degradar a qualidade dos projetos de aprendizado de máquina que dependem dos turkers.

As descobertas do relatório do Pew afirmam que os turkers ‘não são representativos dos americanos em geral – ou mesmo dos trabalhadores adultos’.

Ele também nota uma pesquisa de um estudo anterior (2014), que indicou que os trabalhadores do AMT estão sujeitos a tantos experimentos e pesquisas que a quantidade desse tipo de trabalho ‘pode condicionar os trabalhadores a certos tipos de respostas ou tê-los tornado excessivamente familiarizados com os tipos de perguntas que serão feitas’ – efetivamente, que a rotina do trabalho do AMT inclinará os turkers a se tornarem especialistas em ‘agradar o sistema’ em vez de fornecer entrada autêntica e academicamente (ou mesmo clinicamente) útil.