TY - RPRT TI - LLM Pruning and Distillation in Practice: The Minitron Approach AU - Sharath Turuvekere Sreenivas AU - Saurav Muralidharan AU - Raviraj Joshi AU - Marcin Chochowski AU - Ameya Sunil Mahabaleshwarkar AU - Gerald Shen AU - Jiaqi Zeng AU - Zijia Chen AU - Yoshi Suhara AU - Shizhe Diao AU - Chenhan Yu AU - Wei-Chun Chen AU - Hayley Ross AU - Oluwatobi Olabiyi AU - Ashwath Aithal AU - Oleksii Kuchaiev AU - Daniel Korzekwa AU - Pavlo Molchanov AU - Mostofa Patwary AU - Mohammad Shoeybi AU - Jan Kautz AU - Bryan Catanzaro PY - 2024 UR - https://arxiv.org/abs/2408.11796 ID - 2408.11796 ER -