TY - RPRT TI - Speculative Knowledge Distillation: Bridging the Teacher-Student Gap Through Interleaved Sampling AU - Wenda Xu AU - Rujun Han AU - Zifeng Wang AU - Long T. Le AU - Dhruv Madeka AU - Lei Li AU - William Yang Wang AU - Rishabh Agarwal AU - Chen-Yu Lee AU - Tomas Pfister PY - 2025 UR - https://arxiv.org/abs/2410.11325 ID - 2410.11325 ER -