TY  - RPRT
TI  - JITServe: SLO-aware LLM Serving with Imprecise Request Information
AU  - Wei Zhang
AU  - Zhiyu Wu
AU  - Yi Mu
AU  - Rui Ning
AU  - Banruo Liu
AU  - Nikhil Sarda
AU  - Myungjin Lee
AU  - Fan Lai
PY  - 2025
UR  - https://arxiv.org/abs/2504.20068
ID  - 2504.20068
ER  -