TY  - RPRT
TI  - OmniInfer: System-Wide Acceleration Techniques for Optimizing LLM Serving Throughput and Latency
AU  - Jun Wang
AU  - Yunxiang Yao
AU  - Wenwei Kuang
AU  - Runze Mao
AU  - Zhenhao Sun
AU  - Zhuang Tao
AU  - Ziyang Zhang
AU  - Dengyu Li
AU  - Jiajun Chen
AU  - Zhili Wang
AU  - Kai Cui
AU  - Congzhi Cai
AU  - Longwen Lan
AU  - Ken Zhang
PY  - 2026
UR  - https://arxiv.org/abs/2511.22481
ID  - 2511.22481
ER  -