TY - RPRT TI - RecurrentGemma: Moving Past Transformers for Efficient Open Language Models AU - Aleksandar Botev AU - Soham De AU - Samuel L Smith AU - Anushan Fernando AU - George-Cristian Muraru AU - Ruba Haroun AU - Leonard Berrada AU - Razvan Pascanu AU - Pier Giuseppe Sessa AU - Robert Dadashi AU - Léonard Hussenot AU - Johan Ferret AU - Sertan Girgin AU - Olivier Bachem AU - Alek Andreev AU - Kathleen Kenealy AU - Thomas Mesnard AU - Cassidy Hardin AU - Surya Bhupatiraju AU - Shreya Pathak AU - Laurent Sifre AU - Morgane Rivière AU - Mihir Sanjay Kale AU - Juliette Love AU - Pouya Tafti AU - Armand Joulin AU - Noah Fiedel AU - Evan Senter AU - Yutian Chen AU - Srivatsan Srinivasan AU - Guillaume Desjardins AU - David Budden AU - Arnaud Doucet AU - Sharad Vikram AU - Adam Paszke AU - Trevor Gale AU - Sebastian Borgeaud AU - Charlie Chen AU - Andy Brock AU - Antonia Paterson AU - Jenny Brennan AU - Meg Risdal AU - Raj Gundluru AU - Nesh Devanathan AU - Paul Mooney AU - Nilay Chauhan AU - Phil Culliton AU - Luiz Gustavo Martins AU - Elisa Bandy AU - David Huntsperger AU - Glenn Cameron AU - Arthur Zucker AU - Tris Warkentin AU - Ludovic Peran AU - Minh Giang AU - Zoubin Ghahramani AU - Clément Farabet AU - Koray Kavukcuoglu AU - Demis Hassabis AU - Raia Hadsell AU - Yee Whye Teh AU - Nando de Frietas PY - 2024 UR - https://arxiv.org/abs/2404.07839 ID - 2404.07839 ER -