TY  - RPRT
TI  - Bifurcated Attention: Accelerating Massively Parallel Decoding with Shared Prefixes in LLMs
AU  - Ben Athiwaratkun
AU  - Sujan Kumar Gonugondla
AU  - Sanjay Krishna Gouda
AU  - Haifeng Qian
AU  - Hantian Ding
AU  - Qing Sun
AU  - Jun Wang
AU  - Jiacheng Guo
AU  - Liangfu Chen
AU  - Parminder Bhatia
AU  - Ramesh Nallapati
AU  - Sudipta Sengupta
AU  - Bing Xiang
PY  - 2024
UR  - https://arxiv.org/abs/2403.08845
ID  - 2403.08845
ER  -