TY  - RPRT
TI  - DoReMi: Optimizing Data Mixtures Speeds Up Language Model Pretraining
AU  - Sang Michael Xie
AU  - Hieu Pham
AU  - Xuanyi Dong
AU  - Nan Du
AU  - Hanxiao Liu
AU  - Yifeng Lu
AU  - Percy Liang
AU  - Quoc V. Le
AU  - Tengyu Ma
AU  - Adams Wei Yu
PY  - 2023
UR  - https://arxiv.org/abs/2305.10429
ID  - 2305.10429
ER  -