TY - RPRT TI - GPAS: Accelerating Convergence of LLM Pretraining via Gradient-Preserving Activation Scaling AU - Tianhao Chen AU - Xin Xu AU - Zijing Liu AU - Pengxiang Li AU - Xinyuan Song AU - Ajay Kumar Jaiswal AU - Fan Zhang AU - Jishan Hu AU - Yang Wang AU - Hao Chen AU - Shizhe Diao AU - Shiwei Liu AU - Yu Li AU - Lu Yin AU - Can Yang PY - 2025 UR - https://arxiv.org/abs/2506.22049 ID - 2506.22049 ER -