TY - RPRT TI - Mixture-of-Supernets: Improving Weight-Sharing Supernet Training with Architecture-Routed Mixture-of-Experts AU - Ganesh Jawahar AU - Haichuan Yang AU - Yunyang Xiong AU - Zechun Liu AU - Dilin Wang AU - Fei Sun AU - Meng Li AU - Aasish Pappu AU - Barlas Oguz AU - Muhammad Abdul-Mageed AU - Laks V. S. Lakshmanan AU - Raghuraman Krishnamoorthi AU - Vikas Chandra PY - 2024 UR - https://arxiv.org/abs/2306.04845 ID - 2306.04845 ER -