LLM 自動化テスト用プラグイン「llm-echo」のバージョン 0.5a0 がリリース
本文の状態
日本語全文を表示中
詳細モードで約1分の本文を読めます。
同じ出来事の情報源
この情報源を基点に整理
Simon Willison Blog
開発者シモン・ウィルソンが、大規模言語モデル（LLM）の自動化テストを支援するプラグイン「llm-echo」のバージョン 0.5a0 を公開しました。この更新では、新しい LLM バージョンとの互換性を確認するためのオプション機能が追加されています。
Continue in AI NEW LAB
このニュースを、実務の判断につなげる
AI NEW LABで、試したことや先に確認したい条件を共有できます。まずはログインなしで読めます。
AI NEW LABで論点を見るSource Article
元記事を日本語で読む
本文に関係しない購読案内、埋め込み通知、サイト内プロモーションは除いています。
リリース: llm-echo 0.5a0
- 新しい
-o thinking 1オプションを追加し、LLM 0.32a0 以降との互換性をテストできるようにしました。
このプラグインは、LLM を実際に実行しない「echo」という架空のモデルを提供します。これは自動化されたテストを書く際に役立ちます。以下のように使用できます:
uvx --with llm==0.32a1 --with llm-echo==0.5a0 llm -m echo hi -o thinking 1
これにより、プロンプトをエコーする JSON を返す前に、標準エラー出力に推論ブロック（reasoning block）を偽装して表示します。
タグ: llm
原文を表示
Release: llm-echo 0.5a0
New -o thinking 1 option to help test against LLM 0.32a0 and higher.
This plugin provides a fake model called "echo" for LLM which doesn't run an LLM at all - it's useful for writing automated tests. You can now do this:
uvx --with llm==0.32a1 --with llm-echo==0.5a0 llm -m echo hi -o thinking 1
This will fake a reasoning block to standard error before returning JSON echoing the prompt.
Tags: llm
関連記事
今日のまとめ
AIデイリーブリーフで今日の重要ニュースをまとめ読み