TY - RPRT TI - The Automated LLM Speedrunning Benchmark: Reproducing NanoGPT Improvements AU - Bingchen Zhao AU - Despoina Magka AU - Minqi Jiang AU - Xian Li AU - Roberta Raileanu AU - Tatiana Shavrina AU - Jean-Christophe Gagnon-Audet AU - Kelvin Niu AU - Shagun Sodhani AU - Michael Shvartsman AU - Andrei Lupu AU - Alisia Lupidi AU - Edan Toledo AU - Karen Hambardzumyan AU - Martin Josifoski AU - Thomas Foster AU - Lucia Cipolina-Kun AU - Abhishek Charnalia AU - Derek Dunfield AU - Alexander H. Miller AU - Oisin Mac Aodha AU - Jakob Foerster AU - Yoram Bachrach PY - 2025 UR - https://arxiv.org/abs/2506.22419 ID - 2506.22419 ER -