TY - RPRT TI - BUZZ: Beehive-structured Sparse KV Cache with Segmented Heavy Hitters for Efficient LLM Inference AU - Junqi Zhao AU - Zhijin Fang AU - Shu Li AU - Shaohui Yang AU - Shichao He PY - 2024 UR - https://arxiv.org/abs/2410.23079 ID - 2410.23079 ER -