TY - RPRT TI - Rethinking Critic Learning in PPO: Understanding and Mitigating Value Flattening AU - Yizhuo Li AU - Jianhao Yan AU - Yun Luo AU - Zhi Wang AU - Futing Wang AU - Rong-Xi Tan AU - Kanghui Tian AU - Ganqu Cui AU - Ning Ding AU - Peilin Zhao AU - Yafu Li AU - Yu Cheng PY - 2026 UR - https://arxiv.org/abs/2609.18708 ID - 2609.18708 ER -