TY - RPRT TI - Whale: Efficient Giant Model Training over Heterogeneous GPUs AU - Xianyan Jia AU - Le Jiang AU - Ang Wang AU - Wencong Xiao AU - Ziji Shi AU - Jie Zhang AU - Xinyuan Li AU - Langshi Chen AU - Yong Li AU - Zhen Zheng AU - Xiaoyong Liu AU - Wei Lin PY - 2022 UR - https://arxiv.org/abs/2011.09208 ID - 2011.09208 ER -