TY  - RPRT
TI  - Suppressing Final Layer Hidden State Jumps in Transformer Pretraining
AU  - Keigo Shibata
AU  - Kazuki Yano
AU  - Ryosuke Takahashi
AU  - Jaesung Lee
AU  - Wataru Ikeda
AU  - Jun Suzuki
PY  - 2026
UR  - https://arxiv.org/abs/2601.18302
ID  - 2601.18302
ER  -