TY  - RPRT
TI  - Scalable and Efficient MoE Training for Multitask Multilingual Models
AU  - Young Jin Kim
AU  - Ammar Ahmad Awan
AU  - Alexandre Muzio
AU  - Andres Felipe Cruz Salinas
AU  - Liyang Lu
AU  - Amr Hendy
AU  - Samyam Rajbhandari
AU  - Yuxiong He
AU  - Hany Hassan Awadalla
PY  - 2021
UR  - https://arxiv.org/abs/2109.10465
ID  - 2109.10465
ER  -