TY - RPRT TI - DeRS: Towards Extremely Efficient Upcycled Mixture-of-Experts Models AU - Yongqi Huang AU - Peng Ye AU - Chenyu Huang AU - Jianjian Cao AU - Lin Zhang AU - Baopu Li AU - Gang Yu AU - Tao Chen PY - 2025 UR - https://arxiv.org/abs/2503.01359 ID - 2503.01359 ER -