版本 7
Kimi K3 官方 KV cache profile 上线
根据新公开的 Kimi K3 权重、config 与推理实现,补齐 93 层中 69 KDA + 24 Gated MLA 的架构感知曲线;计算同时包含 MLA 逐 token cache、KDA FP32 recurrent state 与 short-conv state。
本次更新
- 把 Kimi K3 从待公开参数的占位 profile 更新为可计算曲线。
- 按 24 层 Gated MLA 的逐 token cache 与 69 层 KDA 固定状态分别建模。
- 补充 KDA recurrent state、short-conv state 和不计入项的说明。