TY - RPRT TI - SoftDedup: an Efficient Data Reweighting Method for Speeding Up Language Model Pre-training AU - Nan He AU - Weichen Xiong AU - Hanwen Liu AU - Yi Liao AU - Lei Ding AU - Kai Zhang AU - Guohua Tang AU - Xiao Han AU - Wei Yang PY - 2024 UR - https://arxiv.org/abs/2407.06654 ID - 2407.06654 ER -