Hugging Face、10億パラメータのオープン HRM「DFM Mimir v1」を公開

記事の3ポイント

1. 1

   倫理的データによる高性能化

   許可されたポストトレーニングデータのみを使用し、大規模言語モデル開発の障壁となっている非許可データの依存問題を解決するアプローチを示す。

2. 2

   HRM アーキテクチャの採用

   階層推論モデル（HRM）アーキテクチャに基づき、ゼロから訓練された 10 億パラメータ規模のモデルが実装されている。

3. 3

   多言語・多分野での競争力

   20 のベンチマークで評価され、英語と数学・コードタスクでは大規模モデルと競合し、デンマーク語では新たな最高記録を達成した。