TY - RPRT TI - PreDiff-LM: Pretrained Discrete Masked Diffusion Language Modeling with Hybrid Attention AU - Zhengtao Yao AU - Runhao Li AU - Xupeng Chen AU - Jiayi Cheng AU - Chenqian Le AU - Michael Yue AU - Jesson Wang AU - Siheng Wang AU - Guang Yang AU - Haoyan Xu AU - Chenhao Wei AU - Zhengqing Yuan AU - Youran Shen AU - Yanfang Ye AU - Junhao Dong PY - 2026 UR - https://arxiv.org/abs/2607.25157 ID - 2607.25157 ER -