TY - RPRT TI - Rethinking Memory and Communication Cost for Efficient Large Language Model Training AU - Chan Wu AU - Hanxiao Zhang AU - Lin Ju AU - Jinjing Huang AU - Youshao Xiao AU - Zhaoxin Huan AU - Siyuan Li AU - Fanzhuang Meng AU - Lei Liang AU - Xiaolu Zhang AU - Jun Zhou PY - 2023 UR - https://arxiv.org/abs/2310.06003 ID - 2310.06003 ER -