TY - RPRT TI - Mixture-of-Experts Meets Instruction Tuning:A Winning Combination for Large Language Models AU - Sheng Shen AU - Le Hou AU - Yanqi Zhou AU - Nan Du AU - Shayne Longpre AU - Jason Wei AU - Hyung Won Chung AU - Barret Zoph AU - William Fedus AU - Xinyun Chen AU - Tu Vu AU - Yuexin Wu AU - Wuyang Chen AU - Albert Webson AU - Yunxuan Li AU - Vincent Zhao AU - Hongkun Yu AU - Kurt Keutzer AU - Trevor Darrell AU - Denny Zhou PY - 2023 UR - https://arxiv.org/abs/2305.14705 ID - 2305.14705 ER -