TY - RPRT TI - Vibe-Eval: A hard evaluation suite for measuring progress of multimodal language models AU - Piotr Padlewski AU - Max Bain AU - Matthew Henderson AU - Zhongkai Zhu AU - Nishant Relan AU - Hai Pham AU - Donovan Ong AU - Kaloyan Aleksiev AU - Aitor Ormazabal AU - Samuel Phua AU - Ethan Yeo AU - Eugenie Lamprecht AU - Qi Liu AU - Yuqi Wang AU - Eric Chen AU - Deyu Fu AU - Lei Li AU - Che Zheng AU - Cyprien de Masson d'Autume AU - Dani Yogatama AU - Mikel Artetxe AU - Yi Tay PY - 2024 UR - https://arxiv.org/abs/2405.02287 ID - 2405.02287 ER -