TY  - RPRT
TI  - Cost-Efficient Large Language Model Serving for Multi-turn Conversations with CachedAttention
AU  - Bin Gao
AU  - Zhuomin He
AU  - Puru Sharma
AU  - Qingxuan Kang
AU  - Djordje Jevdjic
AU  - Junbo Deng
AU  - Xingkun Yang
AU  - Zhou Yu
AU  - Pengfei Zuo
PY  - 2024
UR  - https://arxiv.org/abs/2403.19708
ID  - 2403.19708
ER  -