TY  - RPRT
TI  - DISTFLASHATTN: Distributed Memory-efficient Attention for Long-context LLMs Training
AU  - Dacheng Li
AU  - Rulin Shao
AU  - Anze Xie
AU  - Eric P. Xing
AU  - Xuezhe Ma
AU  - Ion Stoica
AU  - Joseph E. Gonzalez
AU  - Hao Zhang
PY  - 2024
UR  - https://arxiv.org/abs/2310.03294
ID  - 2310.03294
ER  -