TY - RPRT TI - TIS-DPO: Token-level Importance Sampling for Direct Preference Optimization With Estimated Weights AU - Aiwei Liu AU - Haoping Bai AU - Zhiyun Lu AU - Yanchao Sun AU - Xiang Kong AU - Simon Wang AU - Jiulong Shan AU - Albin Madappally Jose AU - Xiaojiang Liu AU - Lijie Wen AU - Philip S. Yu AU - Meng Cao PY - 2025 UR - https://arxiv.org/abs/2410.04350 ID - 2410.04350 ER -