TY - RPRT TI - LLMs as Noisy Channels: A Shannon Perspective on Model Capacity and Scaling Laws AU - Xu Ouyang AU - Deyi Liu AU - Yuhang Cai AU - Jing Liu AU - Yuan Yang AU - Chen Zheng AU - Thomas Hartvigsen AU - Yiyuan Ma PY - 2026 UR - https://arxiv.org/abs/2605.23901 ID - 2605.23901 ER -