TY - RPRT TI - FlexLLM: Token-Level Co-Serving of LLM Inference and Finetuning with SLO Guarantees AU - Gabriele Oliaro AU - Xupeng Miao AU - Xinhao Cheng AU - Vineeth Kada AU - Mengdi Wu AU - Ruohan Gao AU - Yingyi Huang AU - Remi Delacourt AU - April Yang AU - Yingcheng Wang AU - Colin Unger AU - Zhihao Jia PY - 2025 UR - https://arxiv.org/abs/2402.18789 ID - 2402.18789 ER -