TY - RPRT TI - Inference without Interference: Disaggregate LLM Inference for Mixed Downstream Workloads AU - Cunchen Hu AU - Heyang Huang AU - Liangliang Xu AU - Xusheng Chen AU - Jiang Xu AU - Shuang Chen AU - Hao Feng AU - Chenxi Wang AU - Sa Wang AU - Yungang Bao AU - Ninghui Sun AU - Yizhou Shan PY - 2024 UR - https://arxiv.org/abs/2401.11181 ID - 2401.11181 ER -