AI の再帰的自己改善は予想より時間がかかる可能性を示す研究結果

記事の3ポイント

1. 1

   自己改善の限界を指摘

   AI エージェントは既存の工学問題解決能力はあるが、明確な答えがない自由形式の研究や判断力を要する領域では未熟であることが判明した。

2. 2

   シャドウ評価法の導入

   研究者らは、未発表の高品質論文から質問を抽出し、AI がその回答を試みる「シャドウ評価」という新しい評価手法を提案してテストを行った。

3. 3

   実験結果の失敗

   Anthropic の Claude Opus 4.8 を使用した実験において、エージェントが提出した論文は元の著者によって拒絶され、トップカンファレンスレベルの研究には到達できなかった。