TY - RPRT TI - Secrets of RLHF in Large Language Models Part I: PPO AU - Rui Zheng AU - Shihan Dou AU - Songyang Gao AU - Yuan Hua AU - Wei Shen AU - Binghai Wang AU - Yan Liu AU - Senjie Jin AU - Qin Liu AU - Yuhao Zhou AU - Limao Xiong AU - Lu Chen AU - Zhiheng Xi AU - Nuo Xu AU - Wenbin Lai AU - Minghao Zhu AU - Cheng Chang AU - Zhangyue Yin AU - Rongxiang Weng AU - Wensen Cheng AU - Haoran Huang AU - Tianxiang Sun AU - Hang Yan AU - Tao Gui AU - Qi Zhang AU - Xipeng Qiu AU - Xuanjing Huang PY - 2023 UR - https://arxiv.org/abs/2307.04964 ID - 2307.04964 ER -