TY  - RPRT
TI  - FlexGen: High-Throughput Generative Inference of Large Language Models with a Single GPU
AU  - Ying Sheng
AU  - Lianmin Zheng
AU  - Binhang Yuan
AU  - Zhuohan Li
AU  - Max Ryabinin
AU  - Daniel Y. Fu
AU  - Zhiqiang Xie
AU  - Beidi Chen
AU  - Clark Barrett
AU  - Joseph E. Gonzalez
AU  - Percy Liang
AU  - Christopher Ré
AU  - Ion Stoica
AU  - Ce Zhang
PY  - 2023
UR  - https://arxiv.org/abs/2303.06865
ID  - 2303.06865
ER  -