TY - RPRT TI - Contextual Counting: A Mechanistic Study of Transformers on a Quantitative Task AU - Siavash Golkar AU - Alberto Bietti AU - Mariel Pettee AU - Michael Eickenberg AU - Miles Cranmer AU - Keiya Hirashima AU - Geraud Krawezik AU - Nicholas Lourie AU - Michael McCabe AU - Rudy Morel AU - Ruben Ohana AU - Liam Holden Parker AU - Bruno Régaldo-Saint Blancard AU - Kyunghyun Cho AU - Shirley Ho PY - 2024 UR - https://arxiv.org/abs/2406.02585 ID - 2406.02585 ER -