TY  - RPRT
TI  - A Study on ReLU and Softmax in Transformer
AU  - Kai Shen
AU  - Junliang Guo
AU  - Xu Tan
AU  - Siliang Tang
AU  - Rui Wang
AU  - Jiang Bian
PY  - 2023
UR  - https://arxiv.org/abs/2302.06461
ID  - 2302.06461
ER  -