TY - RPRT TI - On Evaluating Performance of LLM Inference Serving Systems AU - Amey Agrawal AU - Nitin Kedia AU - Anmol Agarwal AU - Jayashree Mohan AU - Nipun Kwatra AU - Souvik Kundu AU - Ramachandran Ramjee AU - Alexey Tumanov PY - 2025 UR - https://arxiv.org/abs/2507.09019 ID - 2507.09019 ER -