首页>产业 > 信息技术 > > 正文

国内首次发布通用认知智能大模型评测体系

2023-06-05 16:24:51
来源:科技日报 作者:吴长锋 评论:0

  6月3日,以“AI大模型时代的长三角数字化之路”为主题的长三角企业家联盟产业数字化峰会在安徽合肥举行。记者从会上了解到,由认知智能全国重点实验室、中科院人工智能产学研创新联盟和长三角人工智能产业链联盟三方共同发布了《通用认知智能大模型评测体系》,旨在形成一套覆盖多任务的大模型能力客观评测体系,引导认知大模型技术和产业健康发展。

  当前,伴随着认知大模型带来的技术阶段跃升和快速进化,通用认知大模型领域逐步“百花齐放”,效果度量和评价成为重要关注点,而覆盖多维度多任务的客观评测,成为验证通用大模型能力的有效方法。

  据了解,由认知智能全国重点实验室牵头设计,并与中国科学院人工智能产学研创新联盟和长三角人工智能产业链联盟一起协调,从产学研源头技术创新和产业链应用落地两方面出发,组织多轮测评标准研讨,共同探讨形成了《通用认知智能大模型评测体系》。评测体系根据底层认知智能能力的智能涌现对通用认知智能大模型的能力进行分析,从而制定生成类通用认知智能大模型的评测标准与评测方法,实现更科学地衡量通用认知智能大模型各个方面的能力和水平。

  据介绍,本次发布的评测体系覆盖内容生成、语言理解、知识问答、逻辑推理、数学能力、编程能力、多模态7大能力维度,共计481个细分任务类型,力求为大模型的研究、行业标准的制定提供参考和借鉴。未来,该评测体系将致力于让认知大模型技术真正解决社会刚需,助力通用人工智能产业聚集。

(责任编辑:韩梦晨)

版权与免责声明:
①凡本站注明稿件来源为:中国高新技术产业导报、中国高新网、中高新传媒的所有文字、图片和音视频稿件,版权均属本网所有,任何媒体、网站或个人未经本网协议授权不得转载、链接、转贴或以其他方式复制发表。已经本网授权使用作品的,被授权人应在授权范围内使用,并注明“来源:中国高新网、中高新传媒或者中国高新技术产业导报”。违反上述声明者 ,本网将追究其相关法律责任。
② 任何单位或个人认为本网站或本网站链接内容可能涉嫌侵犯其合法权益,应该及时向本网站书面反馈,并提供身份证明,权属证明及详细侵权情况证明,本网站在收到上述文件后,将会尽快移除被控侵权的内容或链接。
③如因作品内容、版权和其他问题需要与本网联系的,请在该事由发生之日起30日内进行。电话:010-68667266 电子邮件:dbrmt#chih.org (请将“#”换为“@”)
排行
  • 全部/
  • 本月

编辑推荐


扫描添加 中国高新技术产业导报

(数字报)

扫描添加 中国高新APP客户端
扫描添加 导报微信公众号