TY - RPRT TI - Scaling Embeddings Outperforms Scaling Experts in Language Models AU - Hong Liu AU - Jiaqi Zhang AU - Chao Wang AU - Xing Hu AU - Linkun Lyu AU - Jiaqi Sun AU - Xurui Yang AU - Bo Wang AU - Fengcun Li AU - Yulei Qian AU - Lingtong Si AU - Yerui Sun AU - Rumei Li AU - Peng Pei AU - Yuchen Xie AU - Xunliang Cai PY - 2026 UR - https://arxiv.org/abs/2601.21204 ID - 2601.21204 ER -