TY - RPRT TI - Uncovering mesa-optimization algorithms in Transformers AU - Johannes von Oswald AU - Maximilian Schlegel AU - Alexander Meulemans AU - Seijin Kobayashi AU - Eyvind Niklasson AU - Nicolas Zucchet AU - Nino Scherrer AU - Nolan Miller AU - Mark Sandler AU - Blaise Agüera y Arcas AU - Max Vladymyrov AU - Razvan Pascanu AU - João Sacramento PY - 2024 UR - https://arxiv.org/abs/2309.05858 ID - 2309.05858 ER -