TY  - RPRT
TI  - Broken Symmetry in BF16 Attention: Why FlashAttention Gradients Blow Up Late in Training
AU  - Junlin Chen
AU  - Daize Dong
AU  - Huanwei Di
AU  - Haolong Jia
AU  - Jiawei Wu
AU  - Haotian Xie
AU  - Mingkai Zheng
AU  - Yang Li
AU  - Leshang Chen
AU  - Huishu Wang
AU  - Eric P. Xing
AU  - Hongyi Wang
PY  - 2026
UR  - https://arxiv.org/abs/2609.34272
ID  - 2609.34272
ER  -