TY - RPRT TI - Breaking the Frozen Subspace: Importance Sampling for Low-Rank Optimization in LLM Pretraining AU - Haochen Zhang AU - Junze Yin AU - Guanchu Wang AU - Zirui Liu AU - Lin F. Yang AU - Tianyi Zhang AU - Anshumali Shrivastava AU - Vladimir Braverman PY - 2025 UR - https://arxiv.org/abs/2502.05790 ID - 2502.05790 ER -