金投网

中文通用大模型基准测试SuperCLUE发布 讯飞星火认知大模型国内第一

5月9日,中文通用大模型综合性评测基准SuperCLUE正式发布。国产大模型中讯飞科技研发的星火认知大模型总排名第三,国内排名第一。

5月9日,中文通用大模型综合性评测基准SuperCLUE正式发布。国产大模型中讯飞科技研发的星火认知大模型总排名第三,国内排名第一。

中文通用大模型基准(SuperCLUE),是针对中文可用的通用大模型的一个测评基准。它主要回答的问题是:在当前通用大模型大力发展的情况下,中文大模型的效果情况。包括但不限于:这些模型不同任务的效果情况、相较于国际上的代表性模型做到了什么程度、这些模型与人类的效果对比如何?

该机构利用SuperCLUE测试基准,对市面上主流的支持中文的通用大模型进行了评测与排名。从排名中我们可以看出,GPT-4一骑绝尘,已经非常接近人类的能力。该基准测试主要关注以下问题:中文大模型在不同任务上的表现如何?与国际代表性模型相比,中文大模型的表现达到了何种程度?中文大模型与人类表现相比如何?该模型可通过多个层面,考验市面上主流的中文GPT大模型的能力。其中,基础能力包括了常见的有代表性的模型能力,如语义理解、对话、逻辑推理、角色模拟、代码、生成与创作等10项能力。专业能力包括了中学、大学与专业考试,涵盖了从数学、物理、地理到社会科学等50多项能力。中文特性能力,针对有中文特点的任务,包括了中文成语、诗歌、文学、字形等10项多种能力。

来源:中国证券报·中证网 作者:董安琪

温馨提示:最新动态随时看,请关注金投网APP

相关推荐

复星携17个品牌亮相2023年中国品牌日
复星携17个品牌亮相2023年中国品牌日
以“中国品牌,世界共享;品牌新力量,品质新生活”为主题的2023年中国品牌日活动于5月10日在上海世博展览馆开幕,复星联合旗下复星医药与豫园股份等企业,携17个品牌亮相本届中国品牌日。
恒逸石化经营面持续改善 科技驱动助力公司全面转型
近日,恒逸石化披露2022年年报。2022年,公司经营环境面临多重不利因素叠加影响,下游终端消费需求疲软,能源、运输、辅料等生产成本明显抬升,原油及产业链相关产品价格剧烈波动。公司全体员工迎难而上、砥砺前行,实现营业收入1520.50亿元,同比增长17.26%。
安邦护卫:构建安全服务矩阵 借力数字化契机转型升级
现代安防技术的发展,使得安全服务行业从简单的人力安保逐渐发展成了融合计算机、互联网、通信等先进现代技术的一体化综合安防,现代安保的可靠性大为提高。
文旅消费“爆红”!火力如何持久 各方踊跃出招
文旅部发布数据显示,“五一”假期全国国内旅游出游合计2.74亿人次,按可比口径恢复至2019年同期的119.09%;实现国内旅游收入1480.56亿元,按可比口径恢复至2019年同期的100.66%。从全国数据来看,今年“五一”成为“史上最火‘五一’”。
正式发布!刘庆峰:讯飞大模型10月底赶超ChatGPT
5月6日,科大讯飞举办“讯飞星火认知大模型”成果发布会。发布会现场,科大讯飞董事长刘庆峰和科大讯飞研究院院长刘聪对其星火大模型进行了真机实时演示。
免责声明本文来自第三方投稿,投稿人在金投网发表的所有信息(包括但不限于文字、视频、音频、数据及图表)仅代表个人观点,不保证该信息的准确性、真实性、完整性、有效性、及时性、原创性等,版权归属于原作者,如无意侵犯媒体或个人知识产权,请来电或致函告之,本站将在第一时间处理。金投网发布此文目的在于促进信息交流,不存在盈利性目的,此文观点与本站立场无关,不承担任何责任。未经证实的信息仅供参考,不做任何投资和交易根据,据此操作风险自担。侵权及不实信息举报邮箱至:tousu@cngold.org。

热点频道NEWS.CNGOLD.ORG