TY - RPRT TI - Toward Efficient Language Model Pretraining and Downstream Adaptation via Self-Evolution: A Case Study on SuperGLUE AU - Qihuang Zhong AU - Liang Ding AU - Yibing Zhan AU - Yu Qiao AU - Yonggang Wen AU - Li Shen AU - Juhua Liu AU - Baosheng Yu AU - Bo Du AU - Yixin Chen AU - Xinbo Gao AU - Chunyan Miao AU - Xiaoou Tang AU - Dacheng Tao PY - 2022 UR - https://arxiv.org/abs/2212.01853 ID - 2212.01853 ER -