TY - RPRT TI - Prompt Cache: Modular Attention Reuse for Low-Latency Inference AU - In Gim AU - Guojun Chen AU - Seung-seob Lee AU - Nikhil Sarda AU - Anurag Khandelwal AU - Lin Zhong PY - 2024 UR - https://arxiv.org/abs/2311.04934 ID - 2311.04934 ER -