《通用大模型评测标准》正式发布

中化新网讯 近日在广州举行的2024中国移动全球合作伙伴大会上，中国移动联合中国电子技术标准化研究院、中国电信、国家电网、中国石油等产业各方共同发布《通用大模型评测标准》。

据介绍，大模型评测是助力人工智能赋能行业应用的重要一环，当前众多企业已启动大模型建设，亟需建立配套的通用大模型和行业大模型评测体系。电子标准院联合中国移动及中国电信、国家电网、中国石油等16家重点央企共同开展大模型评测体系建设工作，第一阶段将围绕通用大模型领域和石油、电力、交通和物流等4个重点行业应用领域，从评测标准的精心制定、评测基地的科学建设，到评测试点的应用实践等多个层面全方位展开。

《通用大模型评测标准》内容基于“2—4—6”框架，其中，“2”代表两类评测视角，以重点行业实际使用需求为导向，评测任务划分为理解和生成两类视角；“4”代表四类评测要素，从评测全生命周期中提取出评测工具、评测数据、评测方式和评测指标四类关键要素，确保评测工作可实施性；“6”代表六大评测维度，综合考虑大模型应用过程中的核心能力，设定功能性、准确性、可靠性、安全性、交互性和应用性六大维度。该标准紧密结合央企行业特色场景的实际需求，将为通用大模型全面评估提供客观依据，为人工智能赋能千行百业提供保障。