TY - RPRT TI - EvoMoE: An Evolutional Mixture-of-Experts Training Framework via Dense-To-Sparse Gate AU - Xiaonan Nie AU - Xupeng Miao AU - Shijie Cao AU - Lingxiao Ma AU - Qibin Liu AU - Jilong Xue AU - Youshan Miao AU - Yi Liu AU - Zhi Yang AU - Bin Cui PY - 2022 UR - https://arxiv.org/abs/2112.14397 ID - 2112.14397 ER -