TY - RPRT TI - Do Transformer Modifications Transfer Across Implementations and Applications? AU - Sharan Narang AU - Hyung Won Chung AU - Yi Tay AU - William Fedus AU - Thibault Fevry AU - Michael Matena AU - Karishma Malkan AU - Noah Fiedel AU - Noam Shazeer AU - Zhenzhong Lan AU - Yanqi Zhou AU - Wei Li AU - Nan Ding AU - Jake Marcus AU - Adam Roberts AU - Colin Raffel PY - 2021 UR - https://arxiv.org/abs/2102.11972 ID - 2102.11972 ER -