Hugging Face、反復潜在推論を用いた学習モデル「BDH-CQ」を発表
本文の状態
日本語全文を表示中
詳細モードで約1分の本文を読めます。
同じ出来事の情報源
この情報源を基点に整理
Hugging Face Daily Papers
BDH-CQ は推論時に再帰的潜在記憶を更新し、中間推論を言語化せずに高次元空間で計算を行うモデルであり、ARC-AGI-1 ベンチマークで従来比優れたコスト効率を実現した。
Continue in AI NEW LAB
このニュースを、実務の判断につなげる
AI NEW LABで、試したことや先に確認したい条件を共有できます。まずはログインなしで読めます。
AI NEW LABで論点を見るAI深層分析を開く2026年8月11日 21:00
AI深層分析
キーポイント
再帰的潜在推論の導入
BDH-CQ は推論時に入力を継続的に更新し、中間推論を言語化せずに高次元潜在空間で反復計算を行う仕組みを採用している。
ARC-AGI-1 ベンチマークでの新記録
1.5 億パラメータ構成が 29.5% の pass@2 を達成し、コストと精度のパレートフロンティアを突破して新たな最高水準を確立した。
低コストでの高性能推論
1 タスクあたりの計算コストが 0.0007 ドルという極めて低い費用で、従来モデルを上回る精度を出す運用ポイントを見出した。
重要な引用
inputs presented at inference time continuously update the model's recurrent memory
solves a query through iterative computation in a high-dimensional latent space, without verbalizing its intermediate reasoning
This operating point breaks through the previously reported ARC-AGI-1 cost-accuracy Pareto frontier
編集コメントを表示
編集コメント
この研究は、言語化されない潜在空間での推論プロセスが、コスト効率を劇的に向上させる可能性を示唆している。特に小規模モデルで高難易度タスクを処理できる点は、実用化に向けた重要な一歩となるだろう。
Source Article
元記事を日本語で読む
本文に関係しない購読案内、埋め込み通知、サイト内プロモーションは除いています。
私たちは、コンテキスト学習と反復的な潜在推論を組み合わせた推論モデル「BDH-CQ」を発表します。推論時に提示された入力はモデルの反復メモリを継続的に更新し、モデルは中間推論を言語化することなく、高次元の潜在空間内での反復計算を通じてクエリを解決します。
このモデルを公開されている ARC-AGI-1 評価セットで検証し、デモンストレーションから何を学習するか、推測した変換をどの程度一貫して適用できるか、またどの概念が依然として困難であるかを調べるために、制御された ARC に似た介入実験を行いました。
パラメータ数 1.5 億の構成では、タスクあたりの計算コストが 0.0007 ドルという低コストで、pass@2 が 29.5% を達成しました。この運用ポイントは、従来報告されていた ARC-AGI-1 のコストと精度のパレートフロンティアを突破し、ベンチマークにおけるコスト効率の新たな最高記録を樹立しました。
原文を表示
We introduce BDH-CQ, a reasoning model that combines in-context learning with recurrent latent reasoning. Inputs presented at inference time continuously update the model's recurrent memory; the model then solves a query through iterative computation in a high-dimensional latent space, without verbalizing its intermediate reasoning. We evaluate the model on the public ARC-AGI-1 evaluation set and use controlled ARC-like interventions to study what it learns from demonstrations, how consistently it applies an inferred transformation, and which concepts remain difficult. A 150M-parameter configuration reaches 29.5% pass@2 at a computed inference cost of \$0.0007 per task. This operating point breaks through the previously reported ARC-AGI-1 cost-accuracy Pareto frontier, establishing a new state of the art in benchmark cost efficiency.
関連記事
今日のまとめ
AIデイリーブリーフで今日の重要ニュースをまとめ読み