TY - RPRT TI - CHAI: Clustered Head Attention for Efficient LLM Inference AU - Saurabh Agarwal AU - Bilge Acun AU - Basil Hosmer AU - Mostafa Elhoushi AU - Yejin Lee AU - Shivaram Venkataraman AU - Dimitris Papailiopoulos AU - Carole-Jean Wu PY - 2024 UR - https://arxiv.org/abs/2403.08058 ID - 2403.08058 ER -