์ธ๊ณต์ง๋ฅ
์๋ง์กด ๋ฉ์นด๋์ปฌ ํฐํฌ๋ ๋ฏธ๊ตญ ์ต์ ์๊ธ์ 40% ๋ฏธ๋ง์ ์ง๋ถํ๋ค๋ ์ฐ๊ตฌ ๊ฒฐ๊ณผ
미국과 멕시코의 연구자들이 수행한 연구 결과에 따르면, 아마존 메카니컬 터크 마켓플레이스에서 크라우드소싱 작업자를 고용하는 경우, 75%의 다수는 미국에 기반을 두고 있으며, 시간당 최소 임금의 39.5%인 약 2.83달러를 벌고 있는 것으로 나타났다. 이는 원격 작업자가 작업 요청 목록을 검색하고 지불을 관리하며 기타 종류의 ‘보이지 않는 노동’을 수행하는 데 작업 시간의 3분의 1을 소비하기 때문이다.
이 발견은 최근 매사추세츠 대학교 암허스트의 보고서에서 ‘터커’로 일하는 것과 관련된 낮은 급여와 혜택을 비판하며, AMT 생태계를 효과적으로 저품질 스웨트숍으로 특징짓는 것으로 나타났다.
2005年に 시작된 아마존 메카니컬 터크(AMT)는 크라우드 워커에게 인공지능 태스크(HIT)를 제공하며, 기계 학습 연구자들이 이미지 인식, 자연어 처리(NLP) 평가 및 알고리즘을 형성하거나 테스트하는 시스템적인 태스크와 같은 연구 그룹을 위해 자주 사용된다.
MTurk의 보이지 않는 노동
새로운 연구는 보스턴의 노스이스트 대학교, 마이크로소프트 연구소, 멕시코 국립 자치 대학교(UNAM)의 연구자들에 의해 수행되었다.
100명의 작업자에 의한 40,000개 이상의 HIT 작업에서 1주일 동안 수행된 보이지 않는 노동의 범위. 출처: https://arxiv.org/pdf/2110.00169.pdf
연구 보고서는 작업자의 작업 시간의 33%를 차지하는 ‘보이지 않는 노동’의 범위를 자세히 설명하고 있다. 가장 많은 ‘잃어버린’ 시간은 작업자들이 작업에 대한 지불을 받았는지 확인하기 위해 지불 세부 정보를 확인하는 데 소요되는 시간으로 나타났다. 보고서는 “‘97%의 작업자들이 작업자 대시보드의 수입 섹션을 방문하여 공정하게 지불받았는지 확인하는 보이지 않는 노동을 수행했다”고 밝혔다.
두 번째로 큰 시간 낭비는 작업을 실제로 얻기 위한 ‘초과 경계’였으며, 여기서 작업자들은 요청자의 프로필 페이지를 새로 고치고 AMT HIT 목록 섹션에 광고된 새로운 작업을 검색했다.
터커 모니터링
연구자들은 이전 연구에서 개발된 크롬 확장 프로그램을 사용하여 AMT 작업자들의 주의习惯를 연구했으며, 이 확장 프로그램은 GitHub에서 사용할 수 있다. 확장 프로그램은 100명의 참여한 메카니컬 터크 작업자의 시스템에 설치되었으며, 이들은 1주일 동안 총 40,903개의 HIT 작업을 수행했다.
확장 프로그램의 주요 작업은 작업자들이 실제로 HIT 작업에 소요하는 시간을 평가하는 것이며, 이를 위해 작업자가 현재 집중하고 있는 페이지의 HTML 콘텐츠를 스크래핑하고 파싱하여 작업자의 상호작용을 이해한다. 확장 프로그램은 또한 브라우저 이벤트를 기록하는 시간 기반 백그라운드 프로세스를 기능으로 하며, MTurk 도메인에서 페이지의 상태(활성, 비활성, 닫힘)를 기록한다.
시간 소요가 많은 측면에는 작업자들이 자격 상태를 확인하는 것이 포함되며, 이는 최근에 완료한 작업이 작업자에게 더 좋은 HIT에 접근할 수 있는 자격을 부여했는지 확인하는 것이다. 또한 작업자들이 HIT 게시물을 검색 필터를 사용하여 검색하고, 원하지 않는 작업을 제외하며, 사기성 HIT를 필터링하고, 대기 중인 HIT를 관리하는 것도 포함된다.
지연과 장애
시스템은 또한 작업자가 이전에 수락한 작업을 HIT 풀에 반환하는 ‘지연’ 이벤트와 ‘가짜 시작’을 인식하며, 이는 작업이 예상과 다르다는 것을 알게 된 경우에 발생한다. 또한 작업자들이 HIT를 미리 보거나, HIT에 대한 정보를 읽거나, 작업의 요구 사항을 더 잘 이해하기 위해 HIT의 기원에 메시지를 보내는 데 소요되는 시간도 포함된다.
지불과 관련된 매우 시간 소요가 많은 범주는 작업자들이 작업을 완료한 후에 지불을 받았는지 확인하기 위해 대시보드를 자주 확인하는 것을 포함하며, 이는 작업이 거부되거나 지불되지 않을 수 있으며, 작업자는 이유를 절대 알 수 없다. 또한 작업자들이 자신의 수입을 확인하는 것도 포함되며, 이는 MTurk 대시보드의 전용 섹션에 있으며, 새 지불公告와는 반대된다. 또한 작업자들이 ‘타임아웃’된 HIT를 수행하는 것도 포함되며, 여기서 작업자는 할당된 시간 내에 작업을 완료하지 못하여 작업에 대한 지불을 받지 못한다.
연구 결과는 이전에 추정된 중위 임금($3.76)을 39.5% 낮추는 ‘보이지 않는 노동’을 고려할 때, 작업자들의 임금이 낮아진다는 것을 보여주었다. 보고서는 또한 작업자들이 세션 중에 무급 작업에 소요하는 시간에 대한 인식이 모니터링 세션에서 나타나는 것보다 현저히 낮다는 것도 지적했다.
저자들은 자신의 방법론적 발견에서 모든 추정을 내림으로써 엄격하게 ‘보수적인’ 접근 방식을 보장하기 위해 작업을 수행했으며, 발견의 과장에 대한 비난을 피하기 위해 노력했다고 밝혔다. 그들은 다음과 같이 결론지었다.
‘중위 시간 임금이 단지 $3.76일 때(보이지 않는 노동을 고려하지 않을 때), 작업자들이 임금을 크게 증가시켜야만 공정한 노동이라고 간주할 수 있을 것이다. 그러나 이것은 요청자만이 고려해야 할 문제가 아니라, 플랫폼, 작업자, 심지어 정책 입안자도 고려해야 할 문제이다.’
메카니컬 터크 작업자의 상태
他の 저자들과 조직은 평균 AMT 작업자가 실제로 새로운 보고서에서 추정한 것보다 더 적은 임금을 받는다고 추정한다. 즉, 1시간당 최소 1달러를 받는다고 한다.
AMT의ประโยชน에 대한 지지자들은 상대적으로 빈번하게, AMT 작업자의 낮은 급여와 관련된 논란이 과장되었다고 주장한다. 2020년의 한 연구에서는 미국의 MTurk 작업자들의 일부를 조사했으며, ‘MTurk上的 금융 상황은 일반 인구와 일치한다’고 밝혔으며, 터커들은 ‘MTurk의 유연성을 25달러당 시간당으로 교환하지 않을 것’이라고 밝혔다.
이 연구는 CloudResearch(구 TurkPrime)의 직원들에 의해 수행되었으며, 그들의 서비스에는 ‘연구자들이 메카니컬 터크에서 연구를 수행할 수 있는 도구’가 포함된다.
AMT 작업자들은 일반적으로 미국의 노동법에 의해 보호되지 않는 독립 계약자로 간주된다. 2016年の Pew Research Center의 조사에서는 MTurk 작업자들의 52%가 1시간당 4.99달러 미만을 벌었다고 보고했으며, 이는假定 풀타임 작업과 휴가나 병가가 없는 경우에 해당하며, 이는 1년에 10,379.20달러에 해당한다.
조사에 따르면 많은 작업자들에게 메카니컬 터크는 ‘모든’ 또는 ‘대부분’의 수입을 차지하며, 이러한 작업자의 특징은 젊고, 교육 수준이 낮으며, 저소득 가구에 거주하는 경향이 있다.
그러나 조사에 따르면 터커들은 일반적인 미국 노동자보다 교육 수준이 더 높았으며, 51%가 최소한 대학교 학위를 가지고 있다고 보고했으며, 이는 미국 성인 노동자의 36%에 해당한다. MTurk 작업자 중 단지 12%만이 고등학교 졸업 자격이나 그 이하의 자격만 가지고 있다고 보고했다.
올바른 것?
Pew 보고서는 또한 일반적인 AMT 작업자가 기대하는 ‘평균 사람’과 정반대일 수 있으며, 이는 기계 학습 프로젝트의 품질에 영향을 줄 수 있으며, 이러한 프로젝트는 터커들의 반응에 의존하기 때문이다.
보고서에서는 “터커들은 미국 전체 또는 노동자와 대표성이 없다”고 밝혔다.
또한 2014년의 이전 연구에서 터커들이 너무 많은 실험과 설문조사에 참여하여 특정 유형의 답변에 조건화되거나 질문의 유형에 대해 너무 익숙해져서 진정한 akademik 또는 klinische 유용한 입력을 제공하는 대신 ‘시스템을 만족시키는’ 전문가가 될 수 있다고 지적했다.
