TY  - RPRT
TI  - Response Length Perception and Sequence Scheduling: An LLM-Empowered LLM Inference Pipeline
AU  - Zangwei Zheng
AU  - Xiaozhe Ren
AU  - Fuzhao Xue
AU  - Yang Luo
AU  - Xin Jiang
AU  - Yang You
PY  - 2023
UR  - https://arxiv.org/abs/2305.13144
ID  - 2305.13144
ER  -