TY - RPRT TI - AIBrix: Towards Scalable, Cost-Effective Large Language Model Inference Infrastructure AU - The AIBrix Team AU - Jiaxin Shan AU - Varun Gupta AU - Le Xu AU - Haiyang Shi AU - Jingyuan Zhang AU - Ning Wang AU - Linhui Xu AU - Rong Kang AU - Tongping Liu AU - Yifei Zhang AU - Yiqing Zhu AU - Shuowei Jin AU - Gangmuk Lim AU - Binbin Chen AU - Zuzhi Chen AU - Xiao Liu AU - Xin Chen AU - Kante Yin AU - Chak-Pong Chung AU - Chenyu Jiang AU - Yicheng Lu AU - Jianjun Chen AU - Caixue Lin AU - Wu Xiang AU - Rui Shi AU - Liguang Xie PY - 2025 UR - https://arxiv.org/abs/2504.03648 ID - 2504.03648 ER -