TY - RPRT TI - Native Sparse Attention: Hardware-Aligned and Natively Trainable Sparse Attention AU - Jingyang Yuan AU - Huazuo Gao AU - Damai Dai AU - Junyu Luo AU - Liang Zhao AU - Zhengyan Zhang AU - Zhenda Xie AU - Y. X. Wei AU - Lean Wang AU - Zhiping Xiao AU - Yuqing Wang AU - Chong Ruan AU - Ming Zhang AU - Wenfeng Liang AU - Wangding Zeng PY - 2025 UR - https://arxiv.org/abs/2502.11089 ID - 2502.11089 ER -