TY - RPRT TI - ELAS: Efficient Pre-Training of Low-Rank Large Language Models via 2:4 Activation Sparsity AU - Jiaxi Li AU - Lu Yin AU - Li Shen AU - Jinjin Xu AU - Yuhui Liu AU - Wenwu Wang AU - Shiwei Liu AU - Xilu Wang PY - 2026 UR - https://arxiv.org/abs/2605.03667 ID - 2605.03667 ER -