TY  - RPRT
TI  - Mixture of Attention Spans: Optimizing LLM Inference Efficiency with Heterogeneous Sliding-Window Lengths
AU  - Tianyu Fu
AU  - Haofeng Huang
AU  - Xuefei Ning
AU  - Genghan Zhang
AU  - Boju Chen
AU  - Tianqi Wu
AU  - Hongyi Wang
AU  - Zixiao Huang
AU  - Shiyao Li
AU  - Shengen Yan
AU  - Guohao Dai
AU  - Huazhong Yang
AU  - Yu Wang
PY  - 2025
UR  - https://arxiv.org/abs/2406.14909
ID  - 2406.14909
ER  -