TY - RPRT TI - Rephrasing natural text data with different languages and quality levels for Large Language Model pre-training AU - Michael Pieler AU - Marco Bellagente AU - Hannah Teufel AU - Duy Phung AU - Nathan Cooper AU - Jonathan Tow AU - Paulo Rocha AU - Reshinth Adithyan AU - Zaid Alyafeai AU - Nikhil Pinnaparaju AU - Maksym Zhuravinskyi AU - Carlos Riquelme PY - 2024 UR - https://arxiv.org/abs/2410.20796 ID - 2410.20796 ER -