中国移动携手央企及产业各方共同发布通用大模型评测标准
创始人
2024-10-14 10:22:02
0

10月12日,在2024中国移动全球合作伙伴大会期间,中国移动携手央企及产业各方共同发布大模型评测体系建设的重要成果《通用大模型评测标准》,为产业界遴选优质大模型提供重要参考依据。中国移动总经理何飚、副总经理高同庆,电子标准院、中国电信、国家电网、中国石油、中国物流、南方电网、阿里、科大讯飞、智谱等联合编制单位领导出席发布仪式。

大模型评测是助力人工智能赋能行业应用的重要一环。当前众多企业已启动大模型建设,亟需建立配套的通用大模型和行业大模型评测体系。为发挥大模型评测领域的引领作用,中国移动联合电子标准院及16家重点央企共同开展大模型评测体系建设工作。第一阶段将围绕通用领域和4个重点行业领域,从评测标准制定、评测基地建设、评测试点应用等方面开展工作。

目前,中国移动携手央企及产业各方遵循“确保评测权威、加强业界协同、解决实际问题、保持开放态度”的原则,初步完成通用大模型评测标准制定,得到行业龙头央企、业界头部公司、知名高校及科研机构充分认可,为后续试点评测等工作奠定了坚实基础。

通用大模型评测标准基于“2-4-6”框架。“2”代表两类评测视角,以重点行业实际使用需求为导向,与国标对模型能力要求拉齐,将评测任务划分为理解和生成两类视角。“4”代表四类评测要素,从评测全生命周期中提取出评测工具、评测数据、评测方式和评测指标四类关键要素,确保评测工作可实施性。“6”代表六大评测维度,综合考虑大模型应用过程中的核心能力,设定功能性、准确性、可靠性、安全性、交互性和应用性六大维度。该标准广泛吸纳产学研用各方意见,并结合行业特色场景需求,可为通用大模型全面评估提供客观依据,为AI赋能千行百业提供保障。

未来,中国移动将联合行业龙头企业、业界头部公司、知名高校和科研机构,深入挖掘石油、电力、交通和物流等重点行业应用需求,持续打造并完善通用及行业大模型评测体系,积极建设大模型评测基地,广泛征集各中央企业及头部民企积极参与大模型评测,打造落地应用最佳实践,为提升AI+行业新质生产力,保障国产大模型高质量发展,贡献央企力量。

10月12日,在2024中国移动全球合作伙伴大会期间,中国移动携手央企及产业各方共同发布大模型评测体系建设的重要成果《通用大模型评测标准》,为产业界遴选优质大模型提供重要参考依据。中国移动总经理何飚、副总经理高同庆,电子标准院、中国电信、国家电网、中国石油、中国物流、南方电网、阿里、科大讯飞、智谱等联合编制单位领导出席发布仪式。

大模型评测是助力人工智能赋能行业应用的重要一环。当前众多企业已启动大模型建设,亟需建立配套的通用大模型和行业大模型评测体系。为发挥大模型评测领域的引领作用,中国移动联合电子标准院及16家重点央企共同开展大模型评测体系建设工作。第一阶段将围绕通用领域和4个重点行业领域,从评测标准制定、评测基地建设、评测试点应用等方面开展工作。

目前,中国移动携手央企及产业各方遵循“确保评测权威、加强业界协同、解决实际问题、保持开放态度”的原则,初步完成通用大模型评测标准制定,得到行业龙头央企、业界头部公司、知名高校及科研机构充分认可,为后续试点评测等工作奠定了坚实基础。

通用大模型评测标准基于“2-4-6”框架。“2”代表两类评测视角,以重点行业实际使用需求为导向,与国标对模型能力要求拉齐,将评测任务划分为理解和生成两类视角。“4”代表四类评测要素,从评测全生命周期中提取出评测工具、评测数据、评测方式和评测指标四类关键要素,确保评测工作可实施性。“6”代表六大评测维度,综合考虑大模型应用过程中的核心能力,设定功能性、准确性、可靠性、安全性、交互性和应用性六大维度。该标准广泛吸纳产学研用各方意见,并结合行业特色场景需求,可为通用大模型全面评估提供客观依据,为AI赋能千行百业提供保障。

未来,中国移动将联合行业龙头企业、业界头部公司、知名高校和科研机构,深入挖掘石油、电力、交通和物流等重点行业应用需求,持续打造并完善通用及行业大模型评测体系,积极建设大模型评测基地,广泛征集各中央企业及头部民企积极参与大模型评测,打造落地应用最佳实践,为提升AI+行业新质生产力,保障国产大模型高质量发展,贡献央企力量。

相关内容

热门资讯

黑科技软件(aapoker透明... 黑科技软件(aapoker透明挂辅助器)外挂透明挂辅助安装(透视)一直是真的有挂(黑科技黑科技)-哔...
黑科技app(aa poker... 黑科技app(aa poker智能ai辅助价格)外挂透明挂辅助助手(透视)一直是有挂(黑科技细节)-...
黑科技智能ai(aapoker... 黑科技智能ai(aapoker辅助)外挂透视辅助神器(透视)果然存在有挂(黑科技辅助)-哔哩哔哩aa...
黑科技好牌(智星德州菠萝开挂)... 黑科技好牌(智星德州菠萝开挂)外挂透明挂辅助教程(透视)总是是真的有挂(黑科技方法)-哔哩哔哩1、智...
一分钟涌入800单,比星咖啡为... 编辑/薛向 出品/茶咖观察 刚刚获得第三轮融资的比星咖啡,又火了。 12月10日,比星咖啡与罗小黑联...
漫说反诈|谨防“境外高薪诈骗”... 齐鲁晚报·齐鲁壹点 陶春燕 通讯员 韩艳燕 “喵警长”又来巡逻啦!这次的骗子坏得很——“境外月薪3万...
空调“铝代铜”再惹争议!格力缺... 空调行业持续多年的“铝代铜”之争,因格力电器董事长董明珠的一番话迅速升温。 12月14日晚,董明珠接...
黑科技神器(德扑ai助手)外挂... 黑科技神器(德扑ai助手)外挂透视辅助神器(透视)本来存在有挂(黑科技辅助)-哔哩哔哩1、实时德扑a...
黑科技免费(aa poker有... 黑科技免费(aa poker有没有挂)外挂透视辅助下载(透视)其实存在有挂(黑科技细节)-哔哩哔哩1...
黑科技辅助挂(wpk有猫腻吗)... 黑科技辅助挂(wpk有猫腻吗)外挂透视辅助方法(透视)真是有挂(黑科技脚本)-哔哩哔哩1、完成wpk...