Contáctenos

Amazon Mechanical Turk paga menos del 40% del salario mínimo de EE. UU., sugiere una investigación

Inteligencia Artificial

Amazon Mechanical Turk paga menos del 40% del salario mínimo de EE. UU., sugiere una investigación

mm

Los resultados de un estudio realizado por investigadores en los EE. UU. y México sugieren que los trabajadores colaborativos en el mercado de Amazon Mechanical Turk, con una mayoría del 75% con sede en los Estados Unidos, ganan tan poco como unos 2.83 dólares en promedio por hora, alrededor del 39.5% del salario mínimo federal obligatorio de 7.25 dólares por hora, ya que los trabajadores remotos pasan un tercio de su tiempo de trabajo escaneando listas de solicitudes de trabajo, administrando pagos y realizando otros tipos de "trabajo invisible".

Los hallazgos se producen a raíz de un su informe más reciente de la Universidad de Massachusetts Amherst, que criticó el bajo nivel de remuneración y beneficios que implica ser un "turker" y que caracteriza al ecosistema de AMT efectivamente como un taller clandestino de baja calidad para investigadores académicos con fondos insuficientes.

Lanzado en 2005, Amazon Mechanical Turk (AMT) proporciona a los trabajadores colaborativos tareas de inteligencia humana (HIT) ad hoc, frecuentemente utilizadas por investigadores de aprendizaje automático en el contexto de grupos de estudio "asequibles" para tareas como reconocimiento de imágenes, evaluación de procesamiento del lenguaje natural (PLN) y otras tareas sistemáticas y programáticas diseñadas para ayudar a formular o probar algoritmos (aunque el servicio también se utiliza ampliamente). generar spam).

Trabajo invisible en MTurk

El nuevo Estudio, Titulado Cuantificación del trabajo invisible en el trabajo colectivo, fue realizado por investigadores de la Universidad del Noreste de Boston, Microsoft Research y la Universidad Nacional Autónoma de México (UNAM).

El alcance del trabajo invisible realizado por 100 trabajadores en más de 40,000 2110.00169 tareas HIT durante un período de una semana. Fuente: https://arxiv.org/pdf/XNUMX.pdf

El alcance del trabajo invisible realizado por 100 trabajadores en más de 40,000 XNUMX tareas HIT durante un período de una semana. Fuente: https://arxiv.org/pdf/2110.00169.pdf

El documento detalla la magnitud del "trabajo invisible" que constituye el 33% del tiempo de trabajo de un trabajador turco, como lo demuestra un estudio de campo realizado para el trabajo. La mayor cantidad de tiempo "perdido" se debió al tiempo que los trabajadores de AMT dedican a revisar sus detalles de pago para asegurarse de recibir el pago por una tarea. El informe afirma que 'El 97% de los trabajadores de nuestro estudio realizaron un trabajo invisible al visitar la sección de ganancias en su panel de control (quizás para asegurarse de que habían recibido un pago justo)'.

La segunda mayor pérdida de tiempo para los trabajadores temporales fue la "hipervigilancia" necesaria para obtener trabajo, donde los trabajadores actualizaban las páginas de los perfiles de los solicitantes y buscaban nuevas tareas anunciadas en las secciones de listados de AMT HIT.

Monitoreo de turcos

Los investigadores desarrollaron una extensión de Chrome, que tienen desde disponible en GitHub, Basado en trabajo prioritario que estudió los hábitos de atención de los trabajadores de AMT, pero que no abordó la evaluación del trabajo invisible. La extensión se instaló en los sistemas de 100 trabajadores de Mechanical Turk participantes, quienes colectivamente realizaron 40,903 HIT durante un período de una semana.

La tarea principal de la extensión es evaluar el tiempo real que un trabajador dedica a una tarea HIT. Para ello, monitoriza el estado de las páginas relacionadas con AMT mediante el raspado y análisis del contenido HTML de la página en la que el trabajador está centrado, con el fin de comprender sus interacciones. La extensión también incluye un proceso en segundo plano controlado por tiempo que registra los eventos del navegador en el dominio MTurk y el estado de cada página (es decir, activa, inactiva, cerrada).

Las facetas que consumen mucho tiempo y que se monitorean bajo este sistema incluyen la verificación del estado de las "calificaciones" de los trabajadores (para ver si el trabajo completado recientemente las ha "mejorado", dándoles acceso a HIT de mejor calidad); "explorar y clasificar" una avalancha de publicaciones de HIT con filtros de búsqueda para identificar un posible próximo empleo y excluir trabajo no deseado; y filtrar HITS "fraudulentos" y, en general, administrar y supervisar los HIT en cola.

Retrasos y arrastres

El sistema también reconoce eventos "demorativos" y "falsos comienzos", como cuando un trabajador devuelve una tarea previamente aceptada al grupo de HIT porque resultó ser diferente de sus expectativas; el tiempo que lleva "obtener una vista previa" de los HIT o leer información sobre ellos; enviar mensajes al creador del HIT para comprender mejor las demandas de la tarea; y leer la ayuda general de la plataforma desde las páginas de ayuda de Mechanical Turk.

En la categoría de 'pagos', que requiere mucho tiempo, la investigación encontró que los trabajadores de AMT estaban frecuentemente en su tablero para verificar si se les había pagado, ya que es posible que el trabajo completado sea rechazado, sin pagar, por razones que el trabajador no sabrá. nunca se diga; ver sus ganancias, que tienen una sección dedicada en el panel de MTurk, a diferencia de los anuncios de un nuevo pago; y realizar HIT que "agotan" - donde un trabajador no completa un HIT en el tiempo asignado y no recibe pago por ningún trabajo realizado (una categoría que los investigadores creen que debería estar en la sección "pagos").

Además de las conclusiones del informe de que el trabajo invisible reduce la previamente estimado El salario medio ($3.76) de un trabajador de AMT en un 39.5% cuando se incluye en una sesión de trabajo, también señala que la percepción de los trabajadores de cuánto tiempo han dedicado al trabajo no remunerado durante una sesión es notablemente inferior a lo que revelan las sesiones de seguimiento.

Los autores señalan que han redondeado a la baja todas las estimaciones en sus hallazgos metodológicos para garantizar un enfoque rigurosamente conservador del trabajo y evitar acusaciones de exageración de los hallazgos. Concluyen:

Considerando que el salario medio por hora de los trabajadores es de tan solo 3.76 $ (sin considerar el trabajo invisible), es evidente que los trabajadores colaborativos aún necesitan un aumento salarial drástico para que podamos considerar esta justa situación laboral. Sin embargo, esto no es solo algo que deban considerar quienes lo solicitan, sino también las plataformas, los trabajadores e incluso los responsables políticos.

El estado de los trabajadores turcos mecánicos

Otros autores y organizaciones estiman que el trabajador promedio de AMT en realidad gana menos incluso de lo que se estima en el nuevo informe, tan solo $ 1 una hora.

Los defensores de los beneficios de AMT argumentan, con relativa frecuencia, que las controversias en torno a la mala remuneración de los trabajadores de AMT son exageradas. Uno Estudio de 2020 encuestó a una sección de trabajadores de MTurk de los Estados Unidos y descubrió que 'la situación financiera de las personas en MTurk refleja la población en general', y que turkers 'No cambiaría la flexibilidad de MTurk por menos de 25 dólares por hora'.

Ese trabajo fue realizado por empleados de CloudResearch (anteriormente TurkPrime), cuyos servicios incluyen "herramientas que permiten a los investigadores realizar estudios en Mechanical Turk".

Dado que los trabajadores de AMT se consideran contratistas independientes, por lo general no están cubiertos por las leyes laborales de los EE. UU. en un 2016 encuesta según el centro de investigación Pew, más de la mitad de los trabajadores de AMT (52 %) informaron ganar menos de $4.99 por hora, lo que, suponiendo un trabajo de tiempo completo sin vacaciones ni licencia por enfermedad, equivale a un ingreso de $10,379.20 XNUMX al año.

Para muchos trabajadores, según la encuesta, Mechanical Turk representaba "todo o la mayor parte" de sus ingresos, y esta categoría de "turkers" era característicamente más joven, menos educada y vivía en hogares con ingresos más bajos.

Sin embargo, según la encuesta, los trabajadores turcos generalmente estaban mejor educados que los trabajadores estadounidenses promedio, con el 51% informando que tienen al menos un título universitario, frente al 36% de los trabajadores adultos en los EE. UU., con solo el 12% de los trabajadores de AMT afirmando solo tener un título de escuela secundaria o menos.

¿Lo correcto?

El informe de Pew también indicó que los trabajadores típicos de AMT pueden ser exactamente lo opuesto de la "persona promedio" que la mayoría de los estudios académicos buscan aprovechar, con implicaciones en el grado en que sus respuestas inusuales podrían potencialmente sesgar o degradar la calidad de los proyectos de aprendizaje automático que dependen de los turkers.

Los resultados del informe Pew afirman que los turcos 'no son representativos de los estadounidenses en general, ni siquiera de los adultos que trabajan'.

También toma nota de una investigación anterior (2014) Estudio, que indicó que los trabajadores de AMT están sujetos a tantos experimentos y encuestas que la cantidad de este tipo de trabajo 'podría condicionar a los trabajadores a ciertos tipos de respuestas o hacer que se familiaricen demasiado con los tipos de preguntas que se les harán' – en efecto, que el trabajo pesado de AMT inclinará a los turkers a convertirse en expertos en "complacer al sistema" en lugar de proporcionar información auténtica y académica (o incluso clínicamente) entrada útil.

 

Escritor sobre aprendizaje automático, especialista en síntesis de imágenes humanas. Exdirector de contenido de investigación en Metaphysic.ai.
sitio personal: martinanderson.ai
Contacto: [email protected]
Gorjeo: @manders_ai