TY - RPRT TI - Every FLOP Counts: Scaling a 300B Mixture-of-Experts LING LLM without Premium GPUs AU - Ling Team AU - Binwei Zeng AU - Chao Huang AU - Chao Zhang AU - Changxin Tian AU - Cong Chen AU - Dingnan Jin AU - Feng Yu AU - Feng Zhu AU - Feng Yuan AU - Fakang Wang AU - Gangshan Wang AU - Guangyao Zhai AU - Haitao Zhang AU - Huizhong Li AU - Jun Zhou AU - Jia Liu AU - Junpeng Fang AU - Junjie Ou AU - Jun Hu AU - Ji Luo AU - Ji Zhang AU - Jian Liu AU - Jian Sha AU - Jianxue Qian AU - Jiewei Wu AU - Junping Zhao AU - Jianguo Li AU - Jubao Feng AU - Jingchao Di AU - Junming Xu AU - Jinghua Yao AU - Kuan Xu AU - Kewei Du AU - Longfei Li AU - Lei Liang AU - Lu Yu AU - Li Tang AU - Lin Ju AU - Peng Xu AU - Qing Cui AU - Song Liu AU - Shicheng Li AU - Shun Song AU - Song Yan AU - Tengwei Cai AU - Tianyi Chen AU - Ting Guo AU - Ting Huang AU - Tao Feng AU - Tao Wu AU - Wei Wu AU - Xiaolu Zhang AU - Xueming Yang AU - Xin Zhao AU - Xiaobo Hu AU - Xin Lin AU - Yao Zhao AU - Yilong Wang AU - Yongzhen Guo AU - Yuanyuan Wang AU - Yue Yang AU - Yang Cao AU - Yuhao Fu AU - Yi Xiong AU - Yanzhe Li AU - Zhe Li AU - Zhiqiang Zhang AU - Ziqi Liu AU - Zhaoxin Huan AU - Zujie Wen AU - Zhenhang Sun AU - Zhuoxuan Du AU - Zhengyu He PY - 2025 UR - https://arxiv.org/abs/2503.05139 ID - 2503.05139 ER -