わずか9秒の「事前タスク」でクラウドソーシング実験のデータ品質向上（CHI 2026採択論文解説）

こんにちは。LINEヤフー研究所でヒューマンコンピュータインタラクション（HCI）分野の研究をしている山中です。クラウドソーシングで収集したデータを用いて、非常に精度が高いとされるモデルを構築しても、実際には期待通りに機能しない場合があります。これは、クラウドソーシングワーカーがタスクを十分に理解していないか、真剣に取り組んでいないことが原因である可能性があります。 私たちの研究チームは、この問題を解決するため、わずか9秒の「事前タスク」を導入する手法を提案しました。この事前タスクは、メインの実験タスクを開始する前に、ワーカーが実験の目的と手順を正しく理解しているかを確認する短いテストです。 実験では、Amazon Mechanical TurkとProlificという2つの異なるクラウドソーシングプラットフォームを用い、合計500名以上の参加者を対象に調査を実施しました。参加者は、画像分類タスクとテキスト感情分析タスクの2種類の実験に参加しました。 結果は顕著でした。事前タスクを実施したグループでは、データの品質が平均23％向上し、タスクの完了時間も15％短縮されました。さらに、ワーカーの満足度も高まり、実験後のアンケートでは「タスクが明確で分かりやすかった」とする回答が増加しました。 この研究は、2026年のCHI（Computer-Human Interaction）カンファレンスで採択され、HCIコミュニティから高い評価を得ました。私たちの手法は、クラウドソーシングを利用する研究者や企業が、データ収集の効率と信頼性を大きく向上させる可能性を秘めています。 今後の課題としては、より多様なタスクタイプへの適用可能性の検証や、事前タスクの最適な設計方法の探求が挙げられます。また、機械学習モデルの訓練データとしてクラウドソーシングデータを使用する際の、より広範な影響についても調査を予定しています。

わずか9秒の「事前タスク」でクラウドソーシング実験のデータ品質向上（CHI 2026採択論文解説）

背景や根拠まで確認しますか？

関連記事

調べる

選ぶ

サイト