TY - RPRT TI - Jamba-1.5: Hybrid Transformer-Mamba Models at Scale AU - Jamba Team AU - Barak Lenz AU - Alan Arazi AU - Amir Bergman AU - Avshalom Manevich AU - Barak Peleg AU - Ben Aviram AU - Chen Almagor AU - Clara Fridman AU - Dan Padnos AU - Daniel Gissin AU - Daniel Jannai AU - Dor Muhlgay AU - Dor Zimberg AU - Edden M Gerber AU - Elad Dolev AU - Eran Krakovsky AU - Erez Safahi AU - Erez Schwartz AU - Gal Cohen AU - Gal Shachaf AU - Haim Rozenblum AU - Hofit Bata AU - Ido Blass AU - Inbal Magar AU - Itay Dalmedigos AU - Jhonathan Osin AU - Julie Fadlon AU - Maria Rozman AU - Matan Danos AU - Michael Gokhman AU - Mor Zusman AU - Naama Gidron AU - Nir Ratner AU - Noam Gat AU - Noam Rozen AU - Oded Fried AU - Ohad Leshno AU - Omer Antverg AU - Omri Abend AU - Opher Lieber AU - Or Dagan AU - Orit Cohavi AU - Raz Alon AU - Ro'i Belson AU - Roi Cohen AU - Rom Gilad AU - Roman Glozman AU - Shahar Lev AU - Shaked Meirom AU - Tal Delbari AU - Tal Ness AU - Tomer Asida AU - Tom Ben Gal AU - Tom Braude AU - Uriya Pumerantz AU - Yehoshua Cohen AU - Yonatan Belinkov AU - Yuval Globerson AU - Yuval Peleg Levy AU - Yoav Shoham PY - 2024 UR - https://arxiv.org/abs/2408.12570 ID - 2408.12570 ER -