TY - RPRT TI - ERNIE-SPARSE: Learning Hierarchical Efficient Transformer Through Regularized Self-Attention AU - Yang Liu AU - Jiaxiang Liu AU - Li Chen AU - Yuxiang Lu AU - Shikun Feng AU - Zhida Feng AU - Yu Sun AU - Hao Tian AU - Hua Wu AU - Haifeng Wang PY - 2022 UR - https://arxiv.org/abs/2203.12276 ID - 2203.12276 ER -