TY  - RPRT
TI  - Towards MoE Deployment: Mitigating Inefficiencies in Mixture-of-Expert (MoE) Inference
AU  - Haiyang Huang
AU  - Newsha Ardalani
AU  - Anna Sun
AU  - Liu Ke
AU  - Hsien-Hsin S. Lee
AU  - Anjali Sridhar
AU  - Shruti Bhosale
AU  - Carole-Jean Wu
AU  - Benjamin Lee
PY  - 2023
UR  - https://arxiv.org/abs/2303.06182
ID  - 2303.06182
ER  -