5月9日,中文通用大模型综合性评测基准SuperCLUE正式发布。国产大模型中讯飞科技研发的星火认知大模型总排名第三,国内排名第一。
5月9日,中文通用大模型综合性评测基准SuperCLUE正式发布。国产大模型中讯飞科技研发的星火认知大模型总排名第三,国内排名第一。
中文通用大模型基准(SuperCLUE),是针对中文可用的通用大模型的一个测评基准。它主要回答的问题是:在当前通用大模型大力发展的情况下,中文大模型的效果情况。包括但不限于:这些模型不同任务的效果情况、相较于国际上的代表性模型做到了什么程度、这些模型与人类的效果对比如何?
该机构利用SuperCLUE测试基准,对市面上主流的支持中文的通用大模型进行了评测与排名。从排名中我们可以看出,GPT-4一骑绝尘,已经非常接近人类的能力。该基准测试主要关注以下问题:中文大模型在不同任务上的表现如何?与国际代表性模型相比,中文大模型的表现达到了何种程度?中文大模型与人类表现相比如何?该模型可通过多个层面,考验市面上主流的中文GPT大模型的能力。其中,基础能力包括了常见的有代表性的模型能力,如语义理解、对话、逻辑推理、角色模拟、代码、生成与创作等10项能力。专业能力包括了中学、大学与专业考试,涵盖了从数学、物理、地理到社会科学等50多项能力。中文特性能力,针对有中文特点的任务,包括了中文成语、诗歌、文学、字形等10项多种能力。
来源:中国证券报·中证网 作者:董安琪
温馨提示:最新动态随时看,请关注金投网APP。
相关推荐
- 恒逸石化经营面持续改善 科技驱动助力公司全面转型
- 近日,恒逸石化披露2022年年报。2022年,公司经营环境面临多重不利因素叠加影响,下游终端消费需求疲软,能源、运输、辅料等生产成本明显抬升,原油及产业链相关产品价格剧烈波动。公司全体员工迎难而上、砥砺前行,实现营业收入1520.50亿元,同比增长17.26%。
- 实时热点 科学 0
- 正式发布!刘庆峰:讯飞大模型10月底赶超ChatGPT
- 5月6日,科大讯飞举办“讯飞星火认知大模型”成果发布会。发布会现场,科大讯飞董事长刘庆峰和科大讯飞研究院院长刘聪对其星火大模型进行了真机实时演示。
- 实时热点 科学 0
热点话题
- 中国成单身大国有哪些反思和危害?
- 中国成单身大国有哪些反思和危害?哪怕生活...[详情]
- 霍金再次发出警告 究竟科技和毁灭要怎么看待?
- 霍金再次发出警告究竟科技和毁灭要怎么看待...[详情]
- 一分钟带你看懂美联储加息到底是咋回事!
- 一分钟带你看懂美联储加息到底是咋回事!对...[详情]
- 朋友圈的微商还能盛行多久?
- 朋友圈的微商还能盛行多久?最恨微商的还得...[详情]