《通用大模型评测标准》正式发布

中化新网讯 近日在广州举行的2024中国移动全球合作伙伴大会上,中国移动联合中国电子技术标准化研究院、中国电信、国家电网、中国石油等产业各方共同发布《通用大模型评测标准》。

据介绍,大模型评测是助力人工智能赋能行业应用的重要一环,当前众多企业已启动大模型建设,亟需建立配套的通用大模型和行业大模型评测体系。电子标准院联合中国移动及中国电信、国家电网、中国石油等16家重点央企共同开展大模型评测体系建设工作,第一阶段将围绕通用大模型领域和石油、电力、交通和物流等4个重点行业应用领域,从评测标准的精心制定、评测基地的科学建设,到评测试点的应用实践等多个层面全方位展开。

《通用大模型评测标准》内容基于“2—4—6”框架,其中,“2”代表两类评测视角,以重点行业实际使用需求为导向,评测任务划分为理解和生成两类视角;“4”代表四类评测要素,从评测全生命周期中提取出评测工具、评测数据、评测方式和评测指标四类关键要素,确保评测工作可实施性;“6”代表六大评测维度,综合考虑大模型应用过程中的核心能力,设定功能性、准确性、可靠性、安全性、交互性和应用性六大维度。该标准紧密结合央企行业特色场景的实际需求,将为通用大模型全面评估提供客观依据,为人工智能赋能千行百业提供保障。

相关推荐

针对“错频”“错位”“错觉”等问题—— 业界探讨中小企业数字化转型破局之道

日前,数字化转型赋能中小企业高质量发展研讨会在京举行,多角度解析中小企业数字化转型所面临的机遇和挑战,探讨转型路径。

2024-10-30     中国化工报

IDC:中国协作机器人市场规模超14.8亿元

近日,国际数据公司(IDC)最新发布的《中国协作机器人市场份额,2023》报告指出,2023年中国协作机器人市场整体规模超过14.8亿元,销售出货量超过3万台,显示出该市场的强劲增长势头和巨大潜力。

2024-10-30     中国化工报

工信部:加快新一代信息技术普及应用

在10月23日举行的国新办新闻发布会上,工业和信息化部新闻发言人、运行监测协调局局长陶青表示,今年以来,工信部加快新一代信息技术普及应用,加速融入制造业、矿业、电力、医疗等行业,赋能经济社会发展。

2024-10-30     中国化工报

“工友”们眼里的七化建 ——高质量共建“一带一路”合作交流会侧记

10月18日在成都举行的高质量共建“一带一路”合作交流会上,中国化学工程第七建设有限公司(下称七化建)的合作伙伴从全球各地齐聚成都,共谋合作共商未来。交流会上,这些“工友”们不约而同地谈到了他们眼里的...

2024-10-23     中国化工报

七化建举行高质量共建“一带一路”活动

10月18日下午,中国化学工程第七建设有限公司(下称七化建)在成都举行高质量共建“一带一路”合作交流会。

2024-10-23     中国化工报