TY  - RPRT
TI  - The Journey Matters: Average Parameter Count over Pre-training Unifies Sparse and Dense Scaling Laws
AU  - Tian Jin
AU  - Ahmed Imtiaz Humayun
AU  - Utku Evci
AU  - Suvinay Subramanian
AU  - Amir Yazdanbakhsh
AU  - Dan Alistarh
AU  - Gintare Karolina Dziugaite
PY  - 2025
UR  - https://arxiv.org/abs/2501.12486
ID  - 2501.12486
ER  -