TY - RPRT TI - Scale Efficiently: Insights from Pre-training and Fine-tuning Transformers AU - Yi Tay AU - Mostafa Dehghani AU - Jinfeng Rao AU - William Fedus AU - Samira Abnar AU - Hyung Won Chung AU - Sharan Narang AU - Dani Yogatama AU - Ashish Vaswani AU - Donald Metzler PY - 2022 UR - https://arxiv.org/abs/2109.10686 ID - 2109.10686 ER -