TY  - RPRT
TI  - Continual Pre-training of MoEs: How robust is your router?
AU  - Benjamin Thérien
AU  - Charles-Étienne Joseph
AU  - Zain Sarwar
AU  - Ashwinee Panda
AU  - Anirban Das
AU  - Shi-Xiong Zhang
AU  - Stephen Rawls
AU  - Sambit Sahu
AU  - Eugene Belilovsky
AU  - Irina Rish
PY  - 2025
UR  - https://arxiv.org/abs/2503.05029
ID  - 2503.05029
ER  -