TY - RPRT TI - RetrievalAttention: Accelerating Long-Context LLM Inference via Vector Retrieval AU - Di Liu AU - Meng Chen AU - Baotong Lu AU - Huiqiang Jiang AU - Zhenhua Han AU - Qianxi Zhang AU - Qi Chen AU - Chengruidong Zhang AU - Bailu Ding AU - Kai Zhang AU - Chen Chen AU - Fan Yang AU - Yuqing Yang AU - Lili Qiu PY - 2024 UR - https://arxiv.org/abs/2409.10516 ID - 2409.10516 ER -