TY  - RPRT
TI  - Hydragen: High-Throughput LLM Inference with Shared Prefixes
AU  - Jordan Juravsky
AU  - Bradley Brown
AU  - Ryan Ehrlich
AU  - Daniel Y. Fu
AU  - Christopher Ré
AU  - Azalia Mirhoseini
PY  - 2024
UR  - https://arxiv.org/abs/2402.05099
ID  - 2402.05099
ER  -