TY - RPRT TI - The Lazy Neuron Phenomenon: On Emergence of Activation Sparsity in Transformers AU - Zonglin Li AU - Chong You AU - Srinadh Bhojanapalli AU - Daliang Li AU - Ankit Singh Rawat AU - Sashank J. Reddi AU - Ke Ye AU - Felix Chern AU - Felix Yu AU - Ruiqi Guo AU - Sanjiv Kumar PY - 2023 UR - https://arxiv.org/abs/2210.06313 ID - 2210.06313 ER -