TY - RPRT TI - On the token distance modeling ability of higher RoPE attention dimension AU - Xiangyu Hong AU - Che Jiang AU - Biqing Qi AU - Fandong Meng AU - Mo Yu AU - Bowen Zhou AU - Jie Zhou PY - 2024 UR - https://arxiv.org/abs/2410.08703 ID - 2410.08703 ER -