エージェント向けライブ検索ベンチマーク：エンジン・深さ・モデルの選択基準を公開

記事の3ポイント

1. 1

   検索設定の4つの決定要因

   Web 検索の実装には、クエリ作成と結果処理を行うモデル、エンジン選択、事前検索かツール呼び出しかの手法、および実行回数を制限する予算という4つの重要な判断要素が存在する。

2. 2

   包括的なベンチマークの公開

   OpenRouter は BrowseComp、DeepSearchQA、WideSearch、HLE の4種類の異なるタスクに対して、複数のモデルと検索エンジン構成を定期的に評価し、その結果をリアルタイムで公開している。

3. 3

   検索予算の重要性

   ベンチマークデータは、モデルが複数回の検索ターン（1回、5回、25回）を行うことで品質が向上する傾向を示しており、検索回数の制限（予算）が性能に最も大きな影響を与える要因であることを示唆している。