小米公开 MiMo-V3 核心架构 HySparse2:KV 共享升两级、Prefill 少跑一半
小米 MiMo 团队负责人罗福莉(Fuli Luo)在 X 上预告了 MiMo-V3 的新推理架构 HySparse2,随后小米官方公众号也放出了完整介绍。面向长程多轮 Agent,这套方案的三个目标很直接:更少的 Prefill 计算、更小的 KV Cache、更精准的长上下文检索。 和 MiMo-V2.6 的 Hybrid SWA 相比,相对收益的系数是现成的:在百万 token 成本分析里,Prefill 计算量降至 1/5(约 5 倍),KV Cache 从 12GB 压到 2.7GB——按 1M token 上下文算缩小了约 4.5 倍。MRCR-v2、RUL...