TY - RPRT TI - DataComp-LM: In search of the next generation of training sets for language models AU - Jeffrey Li AU - Alex Fang AU - Georgios Smyrnis AU - Maor Ivgi AU - Matt Jordan AU - Samir Gadre AU - Hritik Bansal AU - Etash Guha AU - Sedrick Keh AU - Kushal Arora AU - Saurabh Garg AU - Rui Xin AU - Niklas Muennighoff AU - Reinhard Heckel AU - Jean Mercat AU - Mayee Chen AU - Suchin Gururangan AU - Mitchell Wortsman AU - Alon Albalak AU - Yonatan Bitton AU - Marianna Nezhurina AU - Amro Abbas AU - Cheng-Yu Hsieh AU - Dhruba Ghosh AU - Josh Gardner AU - Maciej Kilian AU - Hanlin Zhang AU - Rulin Shao AU - Sarah Pratt AU - Sunny Sanyal AU - Gabriel Ilharco AU - Giannis Daras AU - Kalyani Marathe AU - Aaron Gokaslan AU - Jieyu Zhang AU - Khyathi Chandu AU - Thao Nguyen AU - Igor Vasiljevic AU - Sham Kakade AU - Shuran Song AU - Sujay Sanghavi AU - Fartash Faghri AU - Sewoong Oh AU - Luke Zettlemoyer AU - Kyle Lo AU - Alaaeldin El-Nouby AU - Hadi Pouransari AU - Alexander Toshev AU - Stephanie Wang AU - Dirk Groeneveld AU - Luca Soldaini AU - Pang Wei Koh AU - Jenia Jitsev AU - Thomas Kollar AU - Alexandros G. Dimakis AU - Yair Carmon AU - Achal Dave AU - Ludwig Schmidt AU - Vaishaal Shankar PY - 2025 UR - https://arxiv.org/abs/2406.11794 ID - 2406.11794 ER -