TY - RPRT TI - TorchScale: Transformers at Scale AU - Shuming Ma AU - Hongyu Wang AU - Shaohan Huang AU - Wenhui Wang AU - Zewen Chi AU - Li Dong AU - Alon Benhaim AU - Barun Patra AU - Vishrav Chaudhary AU - Xia Song AU - Furu Wei PY - 2022 UR - https://arxiv.org/abs/2211.13184 ID - 2211.13184 ER -