TY - RPRT TI - Aurora-M: Open Source Continual Pre-training for Multilingual Language and Code AU - Taishi Nakamura AU - Mayank Mishra AU - Simone Tedeschi AU - Yekun Chai AU - Jason T Stillerman AU - Felix Friedrich AU - Prateek Yadav AU - Tanmay Laud AU - Vu Minh Chien AU - Terry Yue Zhuo AU - Diganta Misra AU - Ben Bogin AU - Xuan-Son Vu AU - Marzena Karpinska AU - Arnav Varma Dantuluri AU - Wojciech Kusa AU - Tommaso Furlanello AU - Rio Yokota AU - Niklas Muennighoff AU - Suhas Pai AU - Tosin Adewumi AU - Veronika Laippala AU - Xiaozhe Yao AU - Adalberto Junior AU - Alpay Ariyak AU - Aleksandr Drozd AU - Jordan Clive AU - Kshitij Gupta AU - Liangyu Chen AU - Qi Sun AU - Ken Tsui AU - Noah Persaud AU - Nour Fahmy AU - Tianlong Chen AU - Mohit Bansal AU - Nicolo Monti AU - Tai Dang AU - Ziyang Luo AU - Tien-Tung Bui AU - Roberto Navigli AU - Virendra Mehta AU - Matthew Blumberg AU - Victor May AU - Huu Nguyen AU - Sampo Pyysalo PY - 2024 UR - https://arxiv.org/abs/2404.00399 ID - 2404.00399 ER -