TY - RPRT TI - Griffin: Mixing Gated Linear Recurrences with Local Attention for Efficient Language Models AU - Soham De AU - Samuel L. Smith AU - Anushan Fernando AU - Aleksandar Botev AU - George Cristian-Muraru AU - Albert Gu AU - Ruba Haroun AU - Leonard Berrada AU - Yutian Chen AU - Srivatsan Srinivasan AU - Guillaume Desjardins AU - Arnaud Doucet AU - David Budden AU - Yee Whye Teh AU - Razvan Pascanu AU - Nando De Freitas AU - Caglar Gulcehre PY - 2024 UR - https://arxiv.org/abs/2402.19427 ID - 2402.19427 ER -