人工知能
Amazon Mechanical Turkは、米国最低賃金の40%以下を支払っていることが研究で明らかになった

米国とメキシコの研究者による研究の結果によると、Amazon Mechanical Turkマーケットプレイスにおけるクラウドソーシング労働者(75%が米国に拠点を置く)は、1時間あたり2.83ドル以下の賃金を稼いでいることがわかった。これは、1時間あたり7.25ドルの連邦最低賃金の約39.5%に相当する。遠隔労働者は、仕事の依頼リストをスキャンしたり、支払いを管理したり、他の「見えない労働」を行ったりするのに、労働時間の3分の1を費やしている。
これらの発見は、最近のマサチューセッツ大学アマースト校の報告書に続くもので、アマゾン・メカニカル・ターク(AMT)における低賃金と福利厚生の水準を批判し、AMTのエコシステムを実質的に資金不足の学術研究者向けの低品質の工場として特徴付けている。
2005年に開始されたAmazon Mechanical Turk(AMT)は、クラウドワーカーにHuman Intelligence Tasks(HITs)を提供し、機械学習研究者が「安価」な研究グループのタスクとして、画像認識、自然言語処理(NLP)評価、その他のアルゴリズムの開発やテストを支援するシステム的、プログラム的なタスクに頻繁に利用されている(ただし、このサービスは広告スパムの生成にも広く使用されている)。
MTurkの見えない労働
ボストンのノースイースタン大学、Microsoft Research、メキシコ国立自治大学(UNAM)の研究者によって行われた新しい研究「クラウドワークにおける見えない労働の量化」では、クラウドワーカーが仕事を探したり、支払いを管理したりするために、労働時間の33%を「見えない労働」に費やしていることが明らかになった。

100人の労働者が1週間の期間に40,000を超えるHITタスクで行った見えない労働の範囲。 ソース: https://arxiv.org/pdf/2110.00169.pdf
研究では、AMTワーカーが支払い詳細を確認して、公平に支払われたことを確認するために、最も多くの「見えない労働時間」を費やしていることが明らかになった。報告書によると、「私たちの研究における97%の労働者が、支払いセクションを訪問して、公平に支払われたことを確認する(見えない労働)を行った」。
2番目に大きい時間の浪費は、実際に仕事を得るために必要な「過剰な警戒心」だった。ここでは、労働者が依頼者のプロファイルのページを更新し、AMTのHITリストセクションに新しいタスクを探した。
ターカーの監視
研究者は、以前の研究に基づいてChrome拡張機能を開発し、GitHubで公開している。この拡張機能は、AMT関連のページの状態をスクラップしてパースすることで、実際にワーカーがHITタスクに費やす時間を評価する。拡張機能には、MTurkドメインのブラウザイベントをログに記録し、ページの状態(アクティブ、非アクティブ、クローズ)を記録するバックグラウンドプロセスもある。
このシステムで監視される時間のかかる側面には、ワーカーが「資格」の状態を確認する(最近完了した仕事が「昇格」して、高品質のHITにアクセスできるようにしたかどうかを確認する)、HITの投稿を「検索して並べ替える」ことで次の仕事を特定し、不要な仕事を除外する、以及「詐欺的な」HITをフィルタリングし、キューにあるHITを一般的に管理することが含まれる。
遅延と引きずり
システムはまた、「遅延」イベントや「偽の開始」も認識する。たとえば、ワーカーが以前受け入れたタスクをHITプールに戻すことがあり、これは期待と異なることがあったからである。HITを「プレビュー」する時間、またはHITに関する情報を読む時間、タスクの要求をよりよく理解するためにHITの起源者にメッセージを送る時間、Mechanical Turkのヘルプページから一般的なプラットフォームヘルプを読む時間もある。
「支払い」カテゴリでは、研究者はAMTワーカーがダッシュボードを頻繁に確認して、仕事が完了したかどうかを確認していることを発見した。完了した仕事は、ワーカーには通知されない理由で、支払われず、未払いになる可能性があるからである。ワーカーは、MTurkダッシュボードの専用セクションにある「収入」ビューを表示し、新しい支払いの発表とは対照的に、HITが「タイムアウト」した場合(ワーカーが割り当てられた時間内にHITを完了できず、行った作業に対して支払われなかった場合)も同様である。
報告書の発見は、見えない労働が、以前推定されていたAMTワーカーの中位賃金(3.76ドル)を39.5%低下させていることを示唆している。また、ワーカーは、セッション中に行った未払い作業の時間を、実際の監視セッションよりも低く認識していることも示唆している。
著者は、研究の方法論的発見においてすべての推定値を下方に丸めていることを述べており、これは仕事に対する「厳格に保守的な」アプローチを確保するためであり、誇張された発見に対する批判を避けるためである。著者は次のように結論付ける。
「中位時間給が3.76ドル(見えない労働を考慮していない)であることを考えると、クラウドワーカーはまだ、労働が公正であると考えられる前に、賃金の大幅な増加が必要であることは明らかである。ただし、これは依頼者だけが考慮すべきことではなく、プラットフォーム、ワーカー、政策立案者も考慮すべきことである」
メカニカル・ターカーの現状
他の著者や組織は、平均のAMTワーカーが新しい報告書で推定されているよりもさらに低い賃金、たとえば1時間あたり1ドルを稼いでいる可能性があると推定している。
AMTの利点を主張する人々は、AMTワーカーの低賃金に関する論争は過大評価されていると主張することが多い。2020年の1つの研究では、米国のMTurkワーカーの一部を調査し、「MTurk上の人々の経済状況は一般の人々と似ている」ことを発見し、ターカーは「MTurkの柔軟性を25ドル以下の時給で交換しない」ことを発見した。
この研究は、CloudResearch(旧TurkPrime)の従業員によって行われた。同社のサービスには、「Mechanical Turkで研究を実行するためのツール」が含まれる。
AMTワーカーは、独立した契約者と見なされるため、通常、米国の労働法の対象にならない。2016年のピュー・リサーチ・センターの調査では、AMTワーカーの52%以上が1時間あたり4.99ドル未満の賃金を稼いでいると回答し、これは、休暇や病気休暇なしでフルタイムで働いた場合、年間10,379.20ドルの収入に相当する。
調査では、Mechanical Turkは多くのワーカーにとって「すべてまたはほとんど」が収入源であり、このようなターカーは、一般的に若い、教育レベルが低く、収入が低い世帯に住んでいることが特徴的である。
しかし、調査では、ターカーは、一般的なアメリカの労働者よりも、一般的に教育レベルが高いことも明らかになった。51%が、少なくとも大学の学位を持っていると回答し、アメリカの成人労働者の36%に対して、AMTワーカーの12%のみが、高校卒業程度またはそれ以下の学歴であると回答した。
適切なもの
ピュー報告書はまた、典型的なAMTワーカーは、多くの学術研究で利用される「平均的な人」と正反対である可能性があることを示唆しており、これは、ターカーの異常な回答が、Mechanical Turkに頼る機械学習プロジェクトの品質を偏らしたり低下させたりする可能性があることを意味する。
ピュー報告書は、次のように述べている。
「ターカーは、全体のアメリカ人、または労働者全体の代表とはならない」。
また、2014年の以前の研究を引用し、AMTワーカーは、実験や調査に多く参加するため、特定の回答や質問タイプに慣れてしまう可能性があることを示唆している。つまり、ターカーは「システムを喜ばせる」専門家ではなく、真摯で学術的に(または臨床的に)有用な入力を提供するのではなく、ターカーは「システムを喜ばせる」専門家になる可能性がある。












