TY - RPRT TI - Phi-4-Mini Technical Report: Compact yet Powerful Multimodal Language Models via Mixture-of-LoRAs AU - Microsoft AU - : AU - Abdelrahman Abouelenin AU - Atabak Ashfaq AU - Adam Atkinson AU - Hany Awadalla AU - Nguyen Bach AU - Jianmin Bao AU - Alon Benhaim AU - Martin Cai AU - Vishrav Chaudhary AU - Congcong Chen AU - Dong Chen AU - Dongdong Chen AU - Junkun Chen AU - Weizhu Chen AU - Yen-Chun Chen AU - Yi-ling Chen AU - Qi Dai AU - Xiyang Dai AU - Ruchao Fan AU - Mei Gao AU - Min Gao AU - Amit Garg AU - Abhishek Goswami AU - Junheng Hao AU - Amr Hendy AU - Yuxuan Hu AU - Xin Jin AU - Mahmoud Khademi AU - Dongwoo Kim AU - Young Jin Kim AU - Gina Lee AU - Jinyu Li AU - Yunsheng Li AU - Chen Liang AU - Xihui Lin AU - Zeqi Lin AU - Mengchen Liu AU - Yang Liu AU - Gilsinia Lopez AU - Chong Luo AU - Piyush Madan AU - Vadim Mazalov AU - Arindam Mitra AU - Ali Mousavi AU - Anh Nguyen AU - Jing Pan AU - Daniel Perez-Becker AU - Jacob Platin AU - Thomas Portet AU - Kai Qiu AU - Bo Ren AU - Liliang Ren AU - Sambuddha Roy AU - Ning Shang AU - Yelong Shen AU - Saksham Singhal AU - Subhojit Som AU - Xia Song AU - Tetyana Sych AU - Praneetha Vaddamanu AU - Shuohang Wang AU - Yiming Wang AU - Zhenghao Wang AU - Haibin Wu AU - Haoran Xu AU - Weijian Xu AU - Yifan Yang AU - Ziyi Yang AU - Donghan Yu AU - Ishmam Zabir AU - Jianwen Zhang AU - Li Lyna Zhang AU - Yunan Zhang AU - Xiren Zhou PY - 2025 UR - https://arxiv.org/abs/2503.01743 ID - 2503.01743 ER -