TY  - RPRT
TI  - Information Entropy Invariance: Enhancing Length Extrapolation in Attention Mechanisms
AU  - Kewei Li
AU  - Yanwen Kong
AU  - Yiping Xu
AU  - Jianlin Su
AU  - Lan Huang
AU  - Ruochi Zhang
AU  - Fengfeng Zhou
PY  - 2025
UR  - https://arxiv.org/abs/2501.08570
ID  - 2501.08570
ER  -