TY - RPRT TI - OLMoE: Open Mixture-of-Experts Language Models AU - Niklas Muennighoff AU - Luca Soldaini AU - Dirk Groeneveld AU - Kyle Lo AU - Jacob Morrison AU - Sewon Min AU - Weijia Shi AU - Pete Walsh AU - Oyvind Tafjord AU - Nathan Lambert AU - Yuling Gu AU - Shane Arora AU - Akshita Bhagia AU - Dustin Schwenk AU - David Wadden AU - Alexander Wettig AU - Binyuan Hui AU - Tim Dettmers AU - Douwe Kiela AU - Ali Farhadi AU - Noah A. Smith AU - Pang Wei Koh AU - Amanpreet Singh AU - Hannaneh Hajishirzi PY - 2025 UR - https://arxiv.org/abs/2409.02060 ID - 2409.02060 ER -