最近、Google傘下のAIプロジェクトGeminiに関する内部規定が、情報の正確性に対する懸念を引き起こしています。報道によると、AI生成コンテンツの評価を担当する外部委託スタッフに対し、専門知識を持たない分野、特に医療保健などのデリケートな話題について評価を行うよう指示が出されています。
これらの外部委託スタッフは、グローバルテクノロジーサービス企業GlobalLogicに所属しており、Googleは彼らにAI生成の回答を評価するよう求めています。主な評価基準は「真実性」などです。以前は、外部委託スタッフは専門知識を持たない質問についてはスキップすることができました。例えば、心臓病学に関する専門的な質問に出会った場合、評価をスキップすることができました。これは評価の正確性を確保するため、関連するバックグラウンドを持つスタッフのみが有効な評価を行うことができるようにするためでした。
しかし、先週GlobalLogicはGoogleの最新の要請を発表しました。外部委託スタッフは、専門分野の質問をスキップできなくなり、理解できる部分について評価を行い、専門知識の不足を明記するよう求められています。この変更は外部委託スタッフに大きな懸念を引き起こしており、複雑な話題におけるGeminiの正確性に影響する可能性があると懸念されています。
例えば、一部の外部委託スタッフは社内コミュニケーションで、以前のスキップオプションは評価の正確性を高めるためのものであったのに対し、新しい規定により、希少疾患など、全く経験のない問題を評価せざるを得なくなっていると述べています。内部メールには、元の規定は「このタスクに必要な専門知識がない場合は、スキップしてください」であったのに対し、新しい規定は「専門知識を必要とするプロンプトはスキップしないでください」となっています。この方針転換により、外部委託スタッフは不安を感じています。
新しい規定下では、外部委託スタッフが評価タスクをスキップできるのは、情報が完全に欠落している場合(完全なプロンプトまたは回答がない場合など)、またはコンテンツが有害であり、特別な同意が必要な場合の2つの場合のみです。これらの新しい規定はGeminiのパフォーマンス向上を目指したものですが、実際には複雑な話題に対する理解とフィードバックに影響を与える可能性があります。
Googleはこの件についてコメントしておらず、外部委託スタッフの懸念は高まっています。
要点:
🔍 外部委託スタッフは、専門知識を持たないAI生成の回答、特に医療などのデリケートな分野を評価するよう求められています。
🚫 新しい規定により「スキップ」オプションが廃止され、専門知識がない場合でも評価を行うよう求められています。
📉 この方針は、複雑な話題におけるGeminiの正確性に影響を与え、外部委託スタッフに不安と懸念を引き起こしています。