TY - RPRT TI - BigCodeBench: Benchmarking Code Generation with Diverse Function Calls and Complex Instructions AU - Terry Yue Zhuo AU - Minh Chien Vu AU - Jenny Chim AU - Han Hu AU - Wenhao Yu AU - Ratnadira Widyasari AU - Imam Nur Bani Yusuf AU - Haolan Zhan AU - Junda He AU - Indraneil Paul AU - Simon Brunner AU - Chen Gong AU - Thong Hoang AU - Armel Randy Zebaze AU - Xiaoheng Hong AU - Wen-Ding Li AU - Jean Kaddour AU - Ming Xu AU - Zhihan Zhang AU - Prateek Yadav AU - Naman Jain AU - Alex Gu AU - Zhoujun Cheng AU - Jiawei Liu AU - Qian Liu AU - Zijian Wang AU - Binyuan Hui AU - Niklas Muennighoff AU - David Lo AU - Daniel Fried AU - Xiaoning Du AU - Harm de Vries AU - Leandro Von Werra PY - 2025 UR - https://arxiv.org/abs/2406.15877 ID - 2406.15877 ER -