TY - RPRT TI - Nemotron-4 340B Technical Report AU - Nvidia AU - : AU - Bo Adler AU - Niket Agarwal AU - Ashwath Aithal AU - Dong H. Anh AU - Pallab Bhattacharya AU - Annika Brundyn AU - Jared Casper AU - Bryan Catanzaro AU - Sharon Clay AU - Jonathan Cohen AU - Sirshak Das AU - Ayush Dattagupta AU - Olivier Delalleau AU - Leon Derczynski AU - Yi Dong AU - Daniel Egert AU - Ellie Evans AU - Aleksander Ficek AU - Denys Fridman AU - Shaona Ghosh AU - Boris Ginsburg AU - Igor Gitman AU - Tomasz Grzegorzek AU - Robert Hero AU - Jining Huang AU - Vibhu Jawa AU - Joseph Jennings AU - Aastha Jhunjhunwala AU - John Kamalu AU - Sadaf Khan AU - Oleksii Kuchaiev AU - Patrick LeGresley AU - Hui Li AU - Jiwei Liu AU - Zihan Liu AU - Eileen Long AU - Ameya Sunil Mahabaleshwarkar AU - Somshubra Majumdar AU - James Maki AU - Miguel Martinez AU - Maer Rodrigues de Melo AU - Ivan Moshkov AU - Deepak Narayanan AU - Sean Narenthiran AU - Jesus Navarro AU - Phong Nguyen AU - Osvald Nitski AU - Vahid Noroozi AU - Guruprasad Nutheti AU - Christopher Parisien AU - Jupinder Parmar AU - Mostofa Patwary AU - Krzysztof Pawelec AU - Wei Ping AU - Shrimai Prabhumoye AU - Rajarshi Roy AU - Trisha Saar AU - Vasanth Rao Naik Sabavat AU - Sanjeev Satheesh AU - Jane Polak Scowcroft AU - Jason Sewall AU - Pavel Shamis AU - Gerald Shen AU - Mohammad Shoeybi AU - Dave Sizer AU - Misha Smelyanskiy AU - Felipe Soares AU - Makesh Narsimhan Sreedhar AU - Dan Su AU - Sandeep Subramanian AU - Shengyang Sun AU - Shubham Toshniwal AU - Hao Wang AU - Zhilin Wang AU - Jiaxuan You AU - Jiaqi Zeng AU - Jimmy Zhang AU - Jing Zhang AU - Vivienne Zhang AU - Yian Zhang AU - Chen Zhu PY - 2024 UR - https://arxiv.org/abs/2406.11704 ID - 2406.11704 ER -