TY  - RPRT
TI  - Pretraining Large Language Models with NVFP4
AU  - NVIDIA
AU  - Felix Abecassis
AU  - Anjulie Agrusa
AU  - Dong Ahn
AU  - Jonah Alben
AU  - Stefania Alborghetti
AU  - Michael Andersch
AU  - Sivakumar Arayandi
AU  - Alexis Bjorlin
AU  - Aaron Blakeman
AU  - Evan Briones
AU  - Ian Buck
AU  - Bryan Catanzaro
AU  - Muya Chang
AU  - Jinhang Choi
AU  - Mike Chrzanowski
AU  - Eric Chung
AU  - Victor Cui
AU  - Steve Dai
AU  - Bita Darvish Rouhani
AU  - Carlo del Mundo
AU  - Deena Donia
AU  - Burc Eryilmaz
AU  - Henry Estela
AU  - Abhinav Goel
AU  - Oleg Goncharov
AU  - Yugi Guvvala
AU  - Robert Hesse
AU  - Russell Hewett
AU  - Herbert Hum
AU  - Ujval Kapasi
AU  - Brucek Khailany
AU  - Mikail Khona
AU  - Nick Knight
AU  - Alex Kondratenko
AU  - Ronny Krashinsky
AU  - Ben Lanir
AU  - Simon Layton
AU  - Michael Lightstone
AU  - Daniel Lo
AU  - Paulius Micikevicius
AU  - Asit Mishra
AU  - Tim Moon
AU  - Deepak Narayanan
AU  - Chao Ni
AU  - Abhijit Paithankar
AU  - Satish Pasumarthi
AU  - Ankit Patel
AU  - Mostofa Patwary
AU  - Ashwin Poojary
AU  - Gargi Prasad
AU  - Sweta Priyadarshi
AU  - Yigong Qin
AU  - Xiaowei Ren
AU  - Oleg Rybakov
AU  - Charbel Sakr
AU  - Sanjeev Satheesh
AU  - Stas Sergienko
AU  - Pasha Shamis
AU  - Kirthi Shankar
AU  - Nishant Sharma
AU  - Mohammad Shoeybi
AU  - Michael Siu
AU  - Misha Smelyanskiy
AU  - Darko Stosic
AU  - Dusan Stosic
AU  - Bor-Yiing Su
AU  - Frank Sun
AU  - Nima Tajbakhsh
AU  - Shelby Thomas
AU  - Przemek Tredak
AU  - Evgeny Tsykunov
AU  - Gandhi Vaithilingam
AU  - Aditya Vavre
AU  - Rangharajan Venkatesan
AU  - Roger Waleffe
AU  - Qiyu Wan
AU  - Hexin Wang
AU  - Mengdi Wang
AU  - Lizzie Wei
AU  - Hao Wu
AU  - Evan Wu
AU  - Keith Wyss
AU  - Ning Xu
AU  - Jinze Xue
AU  - Charlene Yang
AU  - Yujia Zhai
AU  - Ruoxi Zhang
AU  - Jingyang Zhu
AU  - Zhongbo Zhu
PY  - 2026
UR  - https://arxiv.org/abs/2509.25149
ID  - 2509.25149
ER  -