TY - RPRT TI - Efficient Training of Large Language Models on Distributed Infrastructures: A Survey AU - Jiangfei Duan AU - Shuo Zhang AU - Zerui Wang AU - Lijuan Jiang AU - Wenwen Qu AU - Qinghao Hu AU - Guoteng Wang AU - Qizhen Weng AU - Hang Yan AU - Xingcheng Zhang AU - Xipeng Qiu AU - Dahua Lin AU - Yonggang Wen AU - Xin Jin AU - Tianwei Zhang AU - Peng Sun PY - 2024 UR - https://arxiv.org/abs/2407.20018 ID - 2407.20018 ER -