TY  - RPRT
TI  - InternEvo: Efficient Long-sequence Large Language Model Training via Hybrid Parallelism and Redundant Sharding
AU  - Qiaoling Chen
AU  - Diandian Gu
AU  - Guoteng Wang
AU  - Xun Chen
AU  - YingTong Xiong
AU  - Ting Huang
AU  - Qinghao Hu
AU  - Xin Jin
AU  - Yonggang Wen
AU  - Tianwei Zhang
AU  - Peng Sun
PY  - 2024
UR  - https://arxiv.org/abs/2401.09149
ID  - 2401.09149
ER  -