TY - RPRT TI - Themis: Efficient Sparse Model Training Through Fully Sharded Sparse Data Parallelism AU - Yuhao Qing AU - Guichao Zhu AU - Lintian Lei AU - Fanxin Li AU - Shixiong Zhao AU - Zekai Sun AU - Xiuxian Guan AU - Xusheng Chen AU - Dong Huang AU - Ping Luo AU - Yiming Qiu AU - Heming Cui PY - 2026 UR - https://arxiv.org/abs/2502.02581 ID - 2502.02581 ER -