基于多轮开放式问题的汽车行业中文大模型细粒度测评基准

资源下载链接为： https://pan.quark.cn/s/5cbd6771c862 近年人工智能技术发展推动大模型在各领域普及，高速发展的汽车行业中，智能化、智能驾驶、车联网等技术进步，使中文大模型需求渐增。但现有大模型测评基准多针对通用能力，未覆盖汽车行业需求，导致行业缺乏大模型能力公开评价标准。 为此，我们推出首个汽车行业大模型测评基准 ——SuperCLUE-Auto。这是多维度多轮开放式问题测评基准，既能评价汽车行业大模型能力，还能结合具体维度给出模型回答的细化反馈，以期推动中文大模型在汽车行业的应用效果提升与智能化水平进步，为行业研发提供方向。 各维度有专属标准，如汽车营销维度含符合场景设定程度、满足客户要求、内容创造性。 1 分：不相关或严重错误；2 分：轻微错误、质量低；3 分：中等、及格；4 分：良好、符合预期；5 分：优秀、超预期。 另有智能座舱与交互、汽车营销、汽车理解及知识、车辆使用指南四类多轮对话示例。 含 SuperCLUE-Auto 四大能力与应用、第一二轮得分分解表（注：分数差异 = 第二轮得分 - 第一轮得分）。