TY  - RPRT
TI  - H$_2$O: Heavy-Hitter Oracle for Efficient Generative Inference of Large Language Models
AU  - Zhenyu Zhang
AU  - Ying Sheng
AU  - Tianyi Zhou
AU  - Tianlong Chen
AU  - Lianmin Zheng
AU  - Ruisi Cai
AU  - Zhao Song
AU  - Yuandong Tian
AU  - Christopher Ré
AU  - Clark Barrett
AU  - Zhangyang Wang
AU  - Beidi Chen
PY  - 2023
UR  - https://arxiv.org/abs/2306.14048
ID  - 2306.14048
ER  -