TY  - RPRT
TI  - Small-scale proxies for large-scale Transformer training instabilities
AU  - Mitchell Wortsman
AU  - Peter J. Liu
AU  - Lechao Xiao
AU  - Katie Everett
AU  - Alex Alemi
AU  - Ben Adlam
AU  - John D. Co-Reyes
AU  - Izzeddin Gur
AU  - Abhishek Kumar
AU  - Roman Novak
AU  - Jeffrey Pennington
AU  - Jascha Sohl-dickstein
AU  - Kelvin Xu
AU  - Jaehoon Lee
AU  - Justin Gilmer
AU  - Simon Kornblith
PY  - 2023
UR  - https://arxiv.org/abs/2309.14322
ID  - 2309.14322
ER  -