评测榜单： https://opseval.cstcloud.cn/ 论文链接： https://arxiv.org/abs/2310.07637 01/引言 大规模语言模型（LLMs）在NLP相关任务如翻译、摘要和生成方面展现出了卓越的能力。由于大模型的记忆、生成和推理等高级能力，它在智能运维（AIOps）领域也具有巨大的应用潜力。然而，当前LLMs在AIOps特定任务的性能尚不明确，需要一个全面的基准来指导针对AIOps领域的LLMs的优化。 为了解决这些问题，清华大学、中国科学院计算机网络信息中心、南开大学、必示科技、中兴通讯、中亦图灵等多家单位联合发布了OpsEval：面向大...