TY  - RPRT
TI  - Model Merging in Pre-training of Large Language Models
AU  - Yunshui Li
AU  - Yiyuan Ma
AU  - Shen Yan
AU  - Chaoyi Zhang
AU  - Jing Liu
AU  - Jianqiao Lu
AU  - Ziwen Xu
AU  - Mengzhao Chen
AU  - Minrui Wang
AU  - Shiyi Zhan
AU  - Jin Ma
AU  - Xunhao Lai
AU  - Deyi Liu
AU  - Yao Luo
AU  - Xingyan Bin
AU  - Hongbin Ren
AU  - Mingji Han
AU  - Wenhao Hao
AU  - Bairen Yi
AU  - LingJun Liu
AU  - Bole Ma
AU  - Xiaoying Jia
AU  - Xun Zhou
AU  - Siyuan Qiao
AU  - Liang Xiang
AU  - Yonghui Wu
PY  - 2025
UR  - https://arxiv.org/abs/2505.12082
ID  - 2505.12082
ER  -