TY - RPRT TI - ERNIE 3.0 Titan: Exploring Larger-scale Knowledge Enhanced Pre-training for Language Understanding and Generation AU - Shuohuan Wang AU - Yu Sun AU - Yang Xiang AU - Zhihua Wu AU - Siyu Ding AU - Weibao Gong AU - Shikun Feng AU - Junyuan Shang AU - Yanbin Zhao AU - Chao Pang AU - Jiaxiang Liu AU - Xuyi Chen AU - Yuxiang Lu AU - Weixin Liu AU - Xi Wang AU - Yangfan Bai AU - Qiuliang Chen AU - Li Zhao AU - Shiyong Li AU - Peng Sun AU - Dianhai Yu AU - Yanjun Ma AU - Hao Tian AU - Hua Wu AU - Tian Wu AU - Wei Zeng AU - Ge Li AU - Wen Gao AU - Haifeng Wang PY - 2021 UR - https://arxiv.org/abs/2112.12731 ID - 2112.12731 ER -