TY  - RPRT
TI  - Decoupled DiLoCo for Resilient Distributed Pre-training
AU  - Arthur Douillard
AU  - Keith Rush
AU  - Yani Donchev
AU  - Zachary Charles
AU  - Nova Fallen
AU  - Ayush Dubey
AU  - Ionel Gog
AU  - Josef Dean
AU  - Blake Woodworth
AU  - Zachary Garrett
AU  - Nate Keating
AU  - Jenny Bishop
AU  - Henry Prior
AU  - Edouard Yvinec
AU  - Arthur Szlam
AU  - Marc'Aurelio Ranzato
AU  - Jeff Dean
PY  - 2026
UR  - https://arxiv.org/abs/2604.21428
ID  - 2604.21428
ER  -