风君子博客8月29日消息,SuperCLUE发布中文大模型8月榜单。此次SuperCLUE的8月榜单由5部分组成:总排行榜、OPEN多轮开放问题排行榜、OPT三大能力客观题排行榜、十大基础能力排行榜、开源排行榜。

据介绍,本次评测选取了目前国内外最具代表性的16个通用大语言模型,并且采用包含3337道测试题的全新评测数据集。

在8月榜单中,Baichuan-13B凭借STF迭代优化,第二版效果非常出众,一举拿下国内大模型评测榜首。

SuperCLUE 8月榜单:百川智能Baichuan-13B中国榜夺冠-编程之家

图注:国外代表性模型(GPT4.0/Claude2/gpt-3.5/Llama-2)参与榜单对比,但不参与排名。

另外,各榜单还显示,Baichuan-13B在知识问答、生成创作领域表现优异。另外,在开源榜单,中文领域Baichua-13B也大幅超越Llama2。