TY - RPRT TI - HeadInfer: Memory-Efficient LLM Inference by Head-wise Offloading AU - Cheng Luo AU - Zefan Cai AU - Hanshi Sun AU - Jinqi Xiao AU - Bo Yuan AU - Wen Xiao AU - Junjie Hu AU - Jiawei Zhao AU - Beidi Chen AU - Anima Anandkumar PY - 2025 UR - https://arxiv.org/abs/2502.12574 ID - 2502.12574 ER -