您的位置:首页 >科技 >

中文通用大模型基准测试发布 GPT-4与人类无限接近

2023-05-11 14:01:46   编辑:凌媚翠   来源:
导读 近期中文NLP领域测试社区发布,中文通用大模型综合性评测基准superCLUE。测试排名结果显示,GPT-4已经具有无限接近人类的能力,科大讯飞研

近期中文NLP领域测试社区发布,中文通用大模型综合性评测基准superCLUE。测试排名结果显示,GPT-4已经具有无限接近人类的能力,科大讯飞研发的星火认知大模型排名第3位,百度的文心一言排名为第9位。这个模型能够通过各种不同的层面,对于当前市场上主流的GPT大模型做测试。会从4个方面做测验,包括基础能力,专业能力以及中文特性能力。

基础能力指的是常见的并且具有代表性的模型能力,比如会拥有非常好的逻辑思维能力,可以生成与创作,与人类之间能够进行对话,并且可以完成角色模拟等等数10项能力。专业能力则指的是包括中学以及大学的各种专业考试,覆盖50多项能力,包括数学,物理,地理等等。中文特性能力则指的是针对中文特点的任务,比如成语,诗歌,文学等数10项能力。