TY - RPRT TI - nanoLM: an Affordable LLM Pre-training Benchmark via Accurate Loss Prediction across Scales AU - Yiqun Yao AU - Siqi fan AU - Xiusheng Huang AU - Xuezhi Fang AU - Xiang Li AU - Ziyi Ni AU - Xin Jiang AU - Xuying Meng AU - Peng Han AU - Shuo Shang AU - Kang Liu AU - Aixin Sun AU - Yequan Wang PY - 2024 UR - https://arxiv.org/abs/2304.06875 ID - 2304.06875 ER -