TY  - RPRT
TI  - MoE-Lightning: High-Throughput MoE Inference on Memory-constrained GPUs
AU  - Shiyi Cao
AU  - Shu Liu
AU  - Tyler Griggs
AU  - Peter Schafhalter
AU  - Xiaoxuan Liu
AU  - Ying Sheng
AU  - Joseph E. Gonzalez
AU  - Matei Zaharia
AU  - Ion Stoica
PY  - 2024
UR  - https://arxiv.org/abs/2411.11217
ID  - 2411.11217
ER  -