TY  - RPRT
TI  - ScaleLLM: A Resource-Frugal LLM Serving Framework by Optimizing End-to-End Efficiency
AU  - Yuhang Yao
AU  - Han Jin
AU  - Alay Dilipbhai Shah
AU  - Shanshan Han
AU  - Zijian Hu
AU  - Yide Ran
AU  - Dimitris Stripelis
AU  - Zhaozhuo Xu
AU  - Salman Avestimehr
AU  - Chaoyang He
PY  - 2024
UR  - https://arxiv.org/abs/2408.00008
ID  - 2408.00008
ER  -