TY - RPRT TI - IC-Cache: Efficient Large Language Model Serving via In-context Caching AU - Yifan Yu AU - Yu Gan AU - Nikhil Sarda AU - Lillian Tsai AU - Jiaming Shen AU - Yanqi Zhou AU - Arvind Krishnamurthy AU - Fan Lai AU - Henry M. Levy AU - David Culler PY - 2025 DO - 10.1145/3731569.3764829 UR - https://arxiv.org/abs/2501.12689 ID - 2501.12689 ER -