AI エージェント推論評価ベンチマーク「Legora Benchmark」発表

記事の3ポイント

1. 1

   実環境ベースの評価基準

   Legora は既存の合成環境やオープンソースケースに依存せず、顧客が日常的に使用する Legora aOS™とハッチング内で実際の法務ケースを評価するベンチマークを採用した。

2. 2

   システム全体の品質測定

   単なるモデルの性能だけでなく、ツール、スキル、法的ソース、ワークフローを含むシステム全体が連携して生み出す成果物の質に焦点を当てて評価を行う。

3. 3

   継続的な改善ループ

   ベンチマークは一度きりの評価ではなく、毎回の評価結果に基づいて改善点を特定し、即座にプラットフォームへ反映させる継続的なサイクルを構築している。