Amazon Mechanical Turkは、米国最低賃金の40％以下を支払っている、研究が示唆する

米国とメキシコの研究者による研究の結果によると、Amazon Mechanical Turkマーケットプレイスでのクラウドソーシングワーカー、75％の多数がアメリカに基盤を置いていることがわかりました。彼らは、1時間あたり2.83ドル以下の賃金を稼いでいることがわかりました。つまり、連邦最低賃金の7.25ドル以下の約39.5％です。リモートワーカーは、仕事の依頼リストをスキャンしたり、支払いを管理したり、他の「見えない労働」を行ったりするのに、仕事の3分の1の時間を費やしています。

これらの発見は、最近のマサチューセッツ大学アマースト校の報告書に続くものです。この報告書では、Mechanical Turkワーカーとして働くことの低賃金と福利厚生の低さを批判し、AMTエコシステムを実質的に資金不足の学術研究者向けの低品質の工場と表現しています。

2005年に開始されたAmazon Mechanical Turk（AMT）は、クラウドワーカーにアドホックのヒューマンインテリジェンスタスク（HITs）を提供します。これは、機械学習研究者によって、画像認識、自然言語処理（NLP）評価、その他のアルゴリズムの開発やテストを支援するタスクに頻繁に使用されます（ただし、このサービスは広告スパムの生成にも広く使用されています）。

MTurkでの見えない労働

ボストンにあるノースイースタン大学、Microsoft Research、メキシコ国立自治大学（UNAM）の研究者によって行われた新しい研究では、クラウドワークにおける「見えない労働」の量を測定することを目的としています。

100人のワーカーが1週間の期間中に40,000以上のHITタスクで行った見えない労働の範囲。ソース：https://arxiv.org/pdf/2110.00169.pdf

この論文では、フィールドスタディの結果、turkerの仕事時間の33％が「見えない労働」であることが示されています。最も多くの「失われた」時間は、turkerがタスクの支払い詳細を確認して、正しく支払われたことを確認するために費やした時間でした。報告書によると、「私たちの研究で、97％のワーカーが、支払いセクションを訪問して、公平に支払われたことを確認するために、見えない労働を行った」。

turkerにとって2番目の最大の時間の浪費は、実際に仕事を得るために必要な「過剰な警戒心」でした。ここで、ワーカーは依頼者のプロファイルのページを更新し、AMTのHITリストセクションに広告された新しいタスクを検索しました。

ターカーを監視する

研究者は、以前の研究に基づいて、GitHubで公開されているChrome拡張機能を開発しました。この拡張機能は、AMT関連のページの状態を評価し、turkerがHITタスクに費やす時間を評価することを目的としています。拡張機能には、turkerが現在フォーカスしているページのHTMLコンテンツをスクラップして解析する機能もあります。

拡張機能の主なタスクは、ワーカーがHITタスクに費やす時間を評価することです。拡張機能には、MTurkドメインのブラウザイベントをログに記録し、ページの状態（アクティブ、非アクティブ、クローズ）を表示するバックグラウンドプロセスもあります。

このシステムでは、ワーカーが「資格」の状態を確認する時間（最近完了した作業が「アップグレード」されたかどうかを確認するため）や、HIT投稿のリストを検索フィルタで絞り込み、次の仕事を探したり、望まない仕事を除外したりする時間などの時間のかかる側面も監視しています。

遅延と引きずり

システムはまた、「遅延」イベントや「偽の開始」、たとえばワーカーが期待と異なるタスクだったため、すでに受け取ったタスクをHITプールに返す場合や、HITをプレビューする時間、HITについての情報を読む時間、HITの起源者にメッセージを送る時間、Mechanical Turkヘルプページの一般的なプラットフォームヘルプを読む時間などを認識します。

「支払い」カテゴリでは、研究者はAMTワーカーが頻繁にダッシュボードを確認して、完了した作業が却下されたり、未払いになったりすることがあるため、支払いを受け取ったかどうかを確認していることを発見しました。さらに、研究者は、turkerがHITを完了するのに時間がかかりすぎて、支払いを受け取れなかった場合、turkerは「支払い」セクションに時間を費やすことが多いことを発見しました。

報告書では、turkerの「見えない労働」が、以前推定されていたturkerの平均時給（3.76ドル）を39.5％低下させることも示されています。また、turkerがセッション中に未払い作業に費やす時間をどれだけ認識しているかは、実際の時間よりもかなり低いことも示されています。

研究者は、研究の方法論的発見について、過大評価の可能性を避けるために、厳格に「保守的」なアプローチを取ったと述べています。彼らは次のように結論付けています：

「クラウドワーカーの時給がわずか3.76ドル（見えない労働を考慮しない場合）であることを考えると、クラウドワーカーが公平な賃金を得る前に、賃金の大幅な増加が必要であることは明らかです。ただし、これは依頼者だけが考慮すべきことではなく、プラットフォーム、ワーカー、政策立案者も考慮すべきことです」

Mechanical Turkワーカーの現状

他の著者や組織は、Mechanical Turkワーカーが新しい報告書で推定されているよりも実際にはさらに少ない賃金を稼いでいる可能性があると推定しています。1時間あたり1ドル以下です。

AMTの利点を主張する人々は、Mechanical Turkワーカーに対する低賃金の論争は過大評価されていると主張することがよくあります。2020年の1つの研究では、米国のMechanical Turkワーカーの一部を調査し、「Mechanical Turk上の人の経済状況は一般の人々と同じ」と結論付けています。また、turkerは「Mechanical Turkの柔軟性を25ドル以下の時給で交換しない」と述べています。

この研究は、CloudResearch（旧TurkPrime）の従業員によって行われました。CloudResearchのサービスには、研究者がMechanical Turkで研究を実施するためのツールが含まれます。

AMTワーカーは、独立した契約者と見なされるため、一般的に米国の労働法の対象となっていません。2016年のピュー研究所の調査では、Mechanical Turkワーカーの52％以上が1時間あたり4.99ドル以下の賃金を稼いでいると回答しました。これは、休暇や病気休暇がない場合、年間10,379.20ドルの収入に相当します。

調査では、Mechanical Turkは多くのワーカーにとって「すべてまたはほとんど」の収入源であり、これらのturkerは一般的に若く、教育レベルが低く、収入の低い世帯に住んでいると特徴づけられると述べています。

しかし、調査では、turkerは一般的なアメリカの労働者よりも教育レベルが高いことも示されています。51％のturkerが大学卒業以上の学歴を持っていると回答し、対してアメリカの成人労働者の36％が大学卒業以上の学歴を持っていました。さらに、12％のMechanical Turkワーカーだけが高校卒業程度または以下の学歴を持っていると回答しました。

正しい資質?

ピュー報告書では、典型的なMechanical Turkワーカーは、多くの学術研究で利用される「平均的な人」と正反対である可能性があることも示唆しています。これは、turkerの異常な回答が機械学習プロジェクトの品質を損なったり、偏らせたりする可能性があることを意味します。

ピュー報告書の調査結果は、turkerは「アメリカ人全体の代表ではなく、働く成人の代表でもない」と述べています。

また、2014年の以前の研究から、turkerは実験や調査に多く参加しているため、「特定の回答や質問タイプに慣れてしまう可能性がある」ことも示唆しています。つまり、Mechanical Turkワーカーは「システムを満足させる」ことに優れており、学術的または臨床的に有用な入力を提供するのではなく、実際には「システムを満足させる」ことに優れています。