TY - RPRT TI - Scaling Language Models: Methods, Analysis & Insights from Training Gopher AU - Jack W. Rae AU - Sebastian Borgeaud AU - Trevor Cai AU - Katie Millican AU - Jordan Hoffmann AU - Francis Song AU - John Aslanides AU - Sarah Henderson AU - Roman Ring AU - Susannah Young AU - Eliza Rutherford AU - Tom Hennigan AU - Jacob Menick AU - Albin Cassirer AU - Richard Powell AU - George van den Driessche AU - Lisa Anne Hendricks AU - Maribeth Rauh AU - Po-Sen Huang AU - Amelia Glaese AU - Johannes Welbl AU - Sumanth Dathathri AU - Saffron Huang AU - Jonathan Uesato AU - John Mellor AU - Irina Higgins AU - Antonia Creswell AU - Nat McAleese AU - Amy Wu AU - Erich Elsen AU - Siddhant Jayakumar AU - Elena Buchatskaya AU - David Budden AU - Esme Sutherland AU - Karen Simonyan AU - Michela Paganini AU - Laurent Sifre AU - Lena Martens AU - Xiang Lorraine Li AU - Adhiguna Kuncoro AU - Aida Nematzadeh AU - Elena Gribovskaya AU - Domenic Donato AU - Angeliki Lazaridou AU - Arthur Mensch AU - Jean-Baptiste Lespiau AU - Maria Tsimpoukelli AU - Nikolai Grigorev AU - Doug Fritz AU - Thibault Sottiaux AU - Mantas Pajarskas AU - Toby Pohlen AU - Zhitao Gong AU - Daniel Toyama AU - Cyprien de Masson d'Autume AU - Yujia Li AU - Tayfun Terzi AU - Vladimir Mikulik AU - Igor Babuschkin AU - Aidan Clark AU - Diego de Las Casas AU - Aurelia Guy AU - Chris Jones AU - James Bradbury AU - Matthew Johnson AU - Blake Hechtman AU - Laura Weidinger AU - Iason Gabriel AU - William Isaac AU - Ed Lockhart AU - Simon Osindero AU - Laura Rimell AU - Chris Dyer AU - Oriol Vinyals AU - Kareem Ayoub AU - Jeff Stanway AU - Lorrayne Bennett AU - Demis Hassabis AU - Koray Kavukcuoglu AU - Geoffrey Irving PY - 2022 UR - https://arxiv.org/abs/2112.11446 ID - 2112.11446 ER -