ページを読み込み中…
ページを読み込み中…
45件の記事
Zartbot は Kimi K3 の技術報告書を分析し、KDA(知識駆動アテンション)が Gated MLA や AttnRes とどのように協調して動作するかについて詳述した。
Tencent Hunyuan の HPC-Ops が SGLang に統合され、Hy3 モデルの TPOT 最大 48.8% 削減が期待される。
Hugging Face Daily Papers は、統一型多モーダル事前学習における知識の流れやモダリティ間の相互作用メカニズムを解明する体系的な実験結果を発表し、4 つの主要知見を示した。
Anthropic は Composer のボトルネック解消のため NVL72 向け MoE 訓練メガカーネル Mixture-of-Kittens をオープンソース化し、通信と計算を単一の完全決定性カーネルに融合させた。
アリババのQwenチームは、テキスト・画像・動画を入力としてテキストを出力する2.4兆パラメータの混合専門家(MoE)モデル「Qwen3.8-Max」を広く利用可能にし、同社によると来週にオープンウェイト版が公開されると発表した。