TY - RPRT TI - Aligning Large Language Models with Implicit Preferences from User-Generated Content AU - Zhaoxuan Tan AU - Zheng Li AU - Tianyi Liu AU - Haodong Wang AU - Hyokun Yun AU - Ming Zeng AU - Pei Chen AU - Zhihan Zhang AU - Yifan Gao AU - Ruijie Wang AU - Priyanka Nigam AU - Bing Yin AU - Meng Jiang PY - 2025 UR - https://arxiv.org/abs/2506.04463 ID - 2506.04463 ER -