TY  - RPRT
TI  - Foundation Transformers
AU  - Hongyu Wang
AU  - Shuming Ma
AU  - Shaohan Huang
AU  - Li Dong
AU  - Wenhui Wang
AU  - Zhiliang Peng
AU  - Yu Wu
AU  - Payal Bajaj
AU  - Saksham Singhal
AU  - Alon Benhaim
AU  - Barun Patra
AU  - Zhun Liu
AU  - Vishrav Chaudhary
AU  - Xia Song
AU  - Furu Wei
PY  - 2022
UR  - https://arxiv.org/abs/2210.06423
ID  - 2210.06423
ER  -