TY - RPRT TI - Scaling Vision Transformers to 22 Billion Parameters AU - Mostafa Dehghani AU - Josip Djolonga AU - Basil Mustafa AU - Piotr Padlewski AU - Jonathan Heek AU - Justin Gilmer AU - Andreas Steiner AU - Mathilde Caron AU - Robert Geirhos AU - Ibrahim Alabdulmohsin AU - Rodolphe Jenatton AU - Lucas Beyer AU - Michael Tschannen AU - Anurag Arnab AU - Xiao Wang AU - Carlos Riquelme AU - Matthias Minderer AU - Joan Puigcerver AU - Utku Evci AU - Manoj Kumar AU - Sjoerd van Steenkiste AU - Gamaleldin F. Elsayed AU - Aravindh Mahendran AU - Fisher Yu AU - Avital Oliver AU - Fantine Huot AU - Jasmijn Bastings AU - Mark Patrick Collier AU - Alexey Gritsenko AU - Vighnesh Birodkar AU - Cristina Vasconcelos AU - Yi Tay AU - Thomas Mensink AU - Alexander Kolesnikov AU - Filip Pavetić AU - Dustin Tran AU - Thomas Kipf AU - Mario Lučić AU - Xiaohua Zhai AU - Daniel Keysers AU - Jeremiah Harmsen AU - Neil Houlsby PY - 2023 UR - https://arxiv.org/abs/2302.05442 ID - 2302.05442 ER -