TY - RPRT TI - An Empirical Study of Mamba-based Language Models AU - Roger Waleffe AU - Wonmin Byeon AU - Duncan Riach AU - Brandon Norick AU - Vijay Korthikanti AU - Tri Dao AU - Albert Gu AU - Ali Hatamizadeh AU - Sudhakar Singh AU - Deepak Narayanan AU - Garvit Kulshreshtha AU - Vartika Singh AU - Jared Casper AU - Jan Kautz AU - Mohammad Shoeybi AU - Bryan Catanzaro PY - 2024 UR - https://arxiv.org/abs/2406.07887 ID - 2406.07887 ER -