TY  - RPRT
TI  - Big Bird: Transformers for Longer Sequences
AU  - Manzil Zaheer
AU  - Guru Guruganesh
AU  - Avinava Dubey
AU  - Joshua Ainslie
AU  - Chris Alberti
AU  - Santiago Ontanon
AU  - Philip Pham
AU  - Anirudh Ravula
AU  - Qifan Wang
AU  - Li Yang
AU  - Amr Ahmed
PY  - 2021
UR  - https://arxiv.org/abs/2007.14062
ID  - 2007.14062
ER  -