TY - RPRT TI - Enabling High-Sparsity Foundational Llama Models with Efficient Pretraining and Deployment AU - Abhinav Agarwalla AU - Abhay Gupta AU - Alexandre Marques AU - Shubhra Pandit AU - Michael Goin AU - Eldar Kurtic AU - Kevin Leong AU - Tuan Nguyen AU - Mahmoud Salem AU - Dan Alistarh AU - Sean Lie AU - Mark Kurtz PY - 2024 UR - https://arxiv.org/abs/2405.03594 ID - 2405.03594 ER -