TY  - RPRT
TI  - An Information-Theoretic Perspective on LLM Tokenizers
AU  - Mete Erdogan
AU  - Abhiram Gorle
AU  - Shubham Chandak
AU  - Mert Pilanci
AU  - Tsachy Weissman
PY  - 2026
UR  - https://arxiv.org/abs/2601.09039
ID  - 2601.09039
ER  -