#llm operations のAIニュース

10件の記事

Arize AI、Signal が Alyx で発見した隠れたリトライループの事例を公開

Arize AI は、同社製 AI エンジニアリングエージェント「Alyx」で実行されたツール「Signal」が、生産環境で正常な動作に見える重複タステートループと 43 回のデータセットリトライというバグを検出した事例を報告した。

Vercel は AI Gateway の利用リクエスト履歴を一覧表示する専用ページを追加し、コストやトークン数、モデル情報などをフィルタリングして分析できる機能を導入した。

AWS は、予測不能な意思決定やコスト増などの課題に対応するため、Amazon Bedrock AgentCore に基づく「AgentOps」を公開し、大規模なエージェント AI の運用管理手法を提供した。

AWS は Amazon Bedrock AgentCore の新機能として、バージョン管理されたテストケースをデータセットとして管理する機能を公開した。これにより、オンライン信号とオフライン基準を組み合わせた評価が可能となり、エージェントの時間経過に伴う改善を正確に把握できる。