Skip to content
kefan.life

Posts

All my articles.

2026 5
May 1
  • 为什么KV缓存没有Q

    从感性认知和数学公式两个角度,解释为什么自回归推理只缓存 KV 而不缓存 Q,以及 GQA 背后的设计哲学。

April 1
March 1
January 2
2024 1
January 1
2023 1
July 1
2022 2
June 1
May 1