JetBrains、コーディングエージェントの「rtk」スキルがトークン削減に寄与しないことを実証

記事の3ポイント

1. 1

   測定値と広告の乖離

   rtk が広告する 60〜90% のトークン削減に対し、実際のベンチマークでは低推論負荷時に +7.6% のコスト増、高負荷時には±0% の結果となった。

2. 2

   ツールの限界と非対応領域

   rtk は Bash 出力の圧縮に特化しており、Claude Code が内蔵ツールでファイル参照や検索を行う場合はフックが機能せず、削減効果が得られない。

3. 3

   品質と正しさへの懸念

   テスト結果の要約を行うフィルタリングは編集的判断を伴うため、重要な行が欠落してエージェントが誤った判断を下すリスクがあり、トークン削減に質的な代償が生じる可能性がある。