科学＆テクノロジー

AI生成された反応は、クラウドソーシングの研究研究を損なっています

オンライン研究プロジェクトに参加する人の中には、AIを使用して時間を節約していますダニエルD'Andretti/Unsplash オンラインアンケートは、AIに生成された回答によって圧倒されています。これは、科学者向けの重要なデータソースを汚染する可能性があります。 多作な賃金参加者のようなプラットフォームは、研究者によって提起された質問に答えるための少額の金額を。彼らは、行動研究のために参加者を集める簡単な方法として学者の間で人気があります。 アン・マリー・ヌスバーガー そして、ドイツのベルリンにあるマックスプランク人間開発研究所の彼女の同僚は、自分の仕事の例に気づいた後、回答者が人工知能を使用する頻度を調査することを決定しました。 「私たちが観察していた発生率は本当に衝撃的でした」と彼女は言います。 彼らは、多作のコピーされたコンテンツについて単一の自由回答形式の質問をボックスに貼り付けた参加者の45％が、人々が時間を節約するためにAIチャットボットに質問を入れていることを示していると考えています。 応答の内容のさらなる調査は、「過度に冗長」や「明らかに人間以外の」言語など、AIの使用についてより明白な語っていることを示唆しました。 「今年の初めに収集したデータから、かなりの割合の研究が汚染されているようです」と彼女は言います。 Prolificを使用したその後の研究では、研究者はチャットボットを使用してそれらをスネアするように設計されたトラップを追加しました。 2つのRecaptchas - 人間をボットから区別するために設計された小規模なパターンベースのテスト - は、参加者の0.2％を捕まえました。ユーザーの過去のアクティビティと現在の行動に関する情報を使用したより高度なRecaptchaは、参加者のさらに2.7％を除去しました。人間には見えなかったが、「ヘーゼルナッツ」という言葉を反応に含めるように頼むボットに読みやすいテキストの質問は、さらに1.6％を獲得しましたが、コピーや貼り付けを防ぐと、さらに4.7％の人々が特定されました。 「私たちがする必要があるのは、オンライン調査を完全に不信感ではなく、対応して対応することです」とNussberger氏は言います。それは研究者の責任であり、彼らはより多くの疑いで答えを扱い、AI対応行動を止めるために対策を講じるべきだと彼女は言います。 「しかし、本当に重要なことは、プラットフォームには多くの責任があると思います。彼らはこの問題を非常に真剣に受け止める必要があります。」 Prolificは応答しませんでした 新しい科学者コメントのリクエスト。 「オンライン行動研究の整合性は、自分自身を誤って伝えたり、ボットを使用して現金やバウチャーを獲得するためにボットを使用している調査サイトの参加者によってすでに挑戦されていました。 マット・ホジキンソン、研究倫理のフリーランスコンサルタント。 「研究者は、人間の関与をリモートで検証する方法を集合的に検討する必要があるか、対面接触の昔ながらのアプローチに戻る必要があります。」 トピック： #AI生成された反応はクラウドソーシングの研究研究を損なっています