TY - RPRT TI - Compositional preference models for aligning LMs AU - Dongyoung Go AU - Tomasz Korbak AU - Germán Kruszewski AU - Jos Rozen AU - Marc Dymetman PY - 2024 UR - https://arxiv.org/abs/2310.13011 ID - 2310.13011 ER -