TY - RPRT TI - Why do LLMs attend to the first token? AU - Federico Barbero AU - Álvaro Arroyo AU - Xiangming Gu AU - Christos Perivolaropoulos AU - Michael Bronstein AU - Petar Veličković AU - Razvan Pascanu PY - 2025 UR - https://arxiv.org/abs/2504.02732 ID - 2504.02732 ER -