TY - RPRT TI - The GEM Benchmark: Natural Language Generation, its Evaluation and Metrics AU - Sebastian Gehrmann AU - Tosin Adewumi AU - Karmanya Aggarwal AU - Pawan Sasanka Ammanamanchi AU - Aremu Anuoluwapo AU - Antoine Bosselut AU - Khyathi Raghavi Chandu AU - Miruna Clinciu AU - Dipanjan Das AU - Kaustubh D. Dhole AU - Wanyu Du AU - Esin Durmus AU - Ondřej Dušek AU - Chris Emezue AU - Varun Gangal AU - Cristina Garbacea AU - Tatsunori Hashimoto AU - Yufang Hou AU - Yacine Jernite AU - Harsh Jhamtani AU - Yangfeng Ji AU - Shailza Jolly AU - Mihir Kale AU - Dhruv Kumar AU - Faisal Ladhak AU - Aman Madaan AU - Mounica Maddela AU - Khyati Mahajan AU - Saad Mahamood AU - Bodhisattwa Prasad Majumder AU - Pedro Henrique Martins AU - Angelina McMillan-Major AU - Simon Mille AU - Emiel van Miltenburg AU - Moin Nadeem AU - Shashi Narayan AU - Vitaly Nikolaev AU - Rubungo Andre Niyongabo AU - Salomey Osei AU - Ankur Parikh AU - Laura Perez-Beltrachini AU - Niranjan Ramesh Rao AU - Vikas Raunak AU - Juan Diego Rodriguez AU - Sashank Santhanam AU - João Sedoc AU - Thibault Sellam AU - Samira Shaikh AU - Anastasia Shimorina AU - Marco Antonio Sobrevilla Cabezudo AU - Hendrik Strobelt AU - Nishant Subramani AU - Wei Xu AU - Diyi Yang AU - Akhila Yerukola AU - Jiawei Zhou PY - 2021 UR - https://arxiv.org/abs/2102.01672 ID - 2102.01672 ER -