#label aggregation のAIニュース

LLM 評価者が合意した場合、その結果を信頼すべきか

Amazon Science は、複数の LLM 評価者が同一の判断に合意した際、その独立性が不足している可能性を示し、合意数だけでなく評価プロセスの独立性を検証する必要性を指摘した。