TY - RPRT TI - Automatic Cross-Replica Sharding of Weight Update in Data-Parallel Training AU - Yuanzhong Xu AU - HyoukJoong Lee AU - Dehao Chen AU - Hongjun Choi AU - Blake Hechtman AU - Shibo Wang PY - 2020 UR - https://arxiv.org/abs/2004.13336 ID - 2004.13336 ER -