TY  - RPRT
TI  - Signal Propagation in Transformers: Theoretical Perspectives and the Role of Rank Collapse
AU  - Lorenzo Noci
AU  - Sotiris Anagnostidis
AU  - Luca Biggio
AU  - Antonio Orvieto
AU  - Sidak Pal Singh
AU  - Aurelien Lucchi
PY  - 2022
UR  - https://arxiv.org/abs/2206.03126
ID  - 2206.03126
ER  -