TY  - RPRT
TI  - Beyond Length: Quantifying Long-Range Information for Long-Context LLM Pretraining Data
AU  - Haoran Deng
AU  - Yingyu Lin
AU  - Zhenghao Lin
AU  - Xiao Liu
AU  - Yizhou Sun
AU  - Yi-An Ma
AU  - Yeyun Gong
PY  - 2025
UR  - https://arxiv.org/abs/2510.25804
ID  - 2510.25804
ER  -