TY - RPRT TI - Global MMLU: Understanding and Addressing Cultural and Linguistic Biases in Multilingual Evaluation AU - Shivalika Singh AU - Angelika Romanou AU - Clémentine Fourrier AU - David I. Adelani AU - Jian Gang Ngui AU - Daniel Vila-Suero AU - Peerat Limkonchotiwat AU - Kelly Marchisio AU - Wei Qi Leong AU - Yosephine Susanto AU - Raymond Ng AU - Shayne Longpre AU - Wei-Yin Ko AU - Sebastian Ruder AU - Madeline Smith AU - Antoine Bosselut AU - Alice Oh AU - Andre F. T. Martins AU - Leshem Choshen AU - Daphne Ippolito AU - Enzo Ferrante AU - Marzieh Fadaee AU - Beyza Ermis AU - Sara Hooker PY - 2025 UR - https://arxiv.org/abs/2412.03304 ID - 2412.03304 ER -