TY - RPRT TI - P/D-Serve: Serving Disaggregated Large Language Model at Scale AU - Yibo Jin AU - Tao Wang AU - Huimin Lin AU - Mingyang Song AU - Peiyang Li AU - Yipeng Ma AU - Yicheng Shan AU - Zhengfan Yuan AU - Cailong Li AU - Yajing Sun AU - Tiandeng Wu AU - Xing Chu AU - Ruizhi Huan AU - Li Ma AU - Xiao You AU - Wenting Zhou AU - Yunpeng Ye AU - Wen Liu AU - Xiangkun Xu AU - Yongsheng Zhang AU - Tiantian Dong AU - Jiawei Zhu AU - Zhe Wang AU - Xijian Ju AU - Jianxun Song AU - Haoliang Cheng AU - Xiaojing Li AU - Jiandong Ding AU - Hefei Guo AU - Zhengyong Zhang PY - 2024 UR - https://arxiv.org/abs/2408.08147 ID - 2408.08147 ER -