(相关资料图)
8月28日,国内发起的大模型榜单SuperCLUE发布中文大模型8月榜单。8月榜单由5部分组成:总排行榜、OPEN多轮开放问题排行榜、OPT三大能力客观题排行榜、十大基础能力排行榜、开源排行榜。
据悉,本次8月评测选取了目前国内外最具代表性的16个通用大语言模型,评测数据集为全新的3337道测试题。评测结果发现:
1. 国内大模型在中文任务上的表现与GPT3.5仍有一定距离,但差距在持续缩小。
2. 开源模型竞争力有进一步提升
SuperCLUE发布的8月总排行榜结果如下,Baichuan-13B在本次评测中位列国内大模型榜首。