TY - RPRT TI - Reward Models Inherit Value Biases from Pretraining AU - Brian Christian AU - Jessica A. F. Thompson AU - Elle Michelle Yang AU - Vincent Adam AU - Hannah Rose Kirk AU - Christopher Summerfield AU - Tsvetomira Dumbalska PY - 2026 UR - https://arxiv.org/abs/2601.20838 ID - 2601.20838 ER -