通用认知智能大模型评测体系发布 为大模型健康发展提供指引
| 所在地区: | 安徽-合肥- | 发布日期: | 2023年6月5日 |
6月3日,以“AI大模型时代的长三角数字化之路”为主题的长三角企业家联盟产业数字化峰会在安徽省合肥市举行。会上,认知智能全国重点实验室、中科院人工智能产学研创新联盟和长三角人工智能产业链联盟共同发布《通用认知智能大模型评测体系》,旨在形成一套覆盖多任务的大模型能力客观评测体系,引导中国认知大模型技术和产业健康发展。
当前,伴随着认知大模型带来的技术阶跃和快速进化,人工智能在全球掀起新浪潮,国产大模型呈百花齐放态势,大模型的度量和评价成为重要关注点。一套覆盖科学系统、覆盖多维度多任务的客观评测体系,既可以综合判断现阶段的技术进展,也能够指引通用认知大模型多维度的发展路径。
针对现实需求,认知智能全国重点实验室牵头设计,与中国科学院人工智能产学研创新联盟和长三角人工智能产业链联盟一起,从产学研源头技术创新和产业链应用落地两方面出发,组织多轮评测标准研讨会议,邀请中国科学院科技战略咨询研究院、寒武纪、科大讯飞等产学研各界代表探讨交流,共同形成了《通用认知智能大模型评测体系》。
记者获悉,通过联合讨论最终制定的评测体系,根据底层认知智能能力的智能涌现,对通用认知智能大模型的能力进行分析,制定生成类通用认知智能大模型的评测标准与评测方法,实现更科学地衡量通用认知智能大模型各个方面的能力和水平。
据介绍,本次发布的评测体系覆盖内容生成、语言理解、知识问答、逻辑推理、数学能力、编程能力、多模态7大能力维度,共计481个细分任务类型,力求为大模型的研究、行业标准的制定提供参考和借鉴。
“下一步,我们希望与联盟单位基于通用评测体系,共同推动行业评测方案落地,让认知大模型技术真正解决社会刚需。”认知智能全国重点实验室副主任王士进说。
?
按照客观、公正、公开的原则,本条信息受业主方委托独家指定在中国建设招标网 www.jszhaobiao.com 发布
注册会员 享受贴心服务
标讯查询服务
让您全面及时掌握全国各省市拟建、报批、立项、施工在建项目的项目信息。
帮您跟对合适的项目、找对准确的负责人、全面掌握各项目的业主单位、设计院、总包单位、施工企业的项目 经理、项目负责人的详细联系方式。
帮您第一时间获得全国项目业主、招标代理公司和政府采购中心发布的招标、中标项目信息。
标讯定制服务
根据您的关注重点定制项目,从海量项目中筛选出符合您要求和标准的工程并及时找出关键负责人和联系方式。
根据您的需要,向您指定的手机、电子邮箱及时反馈项目进展情况。