TY - RPRT TI - Knowledge Distillation and Dataset Distillation of Large Language Models: Emerging Trends, Challenges, and Future Directions AU - Luyang Fang AU - Xiaowei Yu AU - Jiazhang Cai AU - Yongkai Chen AU - Shushan Wu AU - Zhengliang Liu AU - Zhenyuan Yang AU - Haoran Lu AU - Xilin Gong AU - Yufang Liu AU - Terry Ma AU - Wei Ruan AU - Ali Abbasi AU - Jing Zhang AU - Tao Wang AU - Ehsan Latif AU - Weihang You AU - Hanqi Jiang AU - Wei Liu AU - Wei Zhang AU - Soheil Kolouri AU - Xiaoming Zhai AU - Dajiang Zhu AU - Wenxuan Zhong AU - Tianming Liu AU - Ping Ma PY - 2026 UR - https://arxiv.org/abs/2504.14772 ID - 2504.14772 ER -