SuperCLUE 8月榜單:百川智能Baichuan-13B中國(guó)榜奪冠

8月29日消息,SuperCLUE發(fā)布中文大模型8月榜單。此次SuperCLUE的8月榜單由5部分組成:總排行榜、OPEN多輪開(kāi)放問(wèn)題排行榜、OPT三大能力客觀題排行榜、十大基礎(chǔ)能力排行榜、開(kāi)源排行榜。

據(jù)介紹,本次評(píng)測(cè)選取了目前國(guó)內(nèi)外最具代表性的16個(gè)通用大語(yǔ)言模型,并且采用包含3337道測(cè)試題的全新評(píng)測(cè)數(shù)據(jù)集。

在8月榜單中,Baichuan-13B憑借STF迭代優(yōu)化,第二版效果非常出眾,一舉拿下國(guó)內(nèi)大模型評(píng)測(cè)榜首。

圖注:國(guó)外代表性模型(GPT4.0/Claude2/gpt-3.5/Llama-2)參與榜單對(duì)比,但不參與排名。

另外,各榜單還顯示,Baichuan-13B在知識(shí)問(wèn)答、生成創(chuàng)作領(lǐng)域表現(xiàn)優(yōu)異。另外,在開(kāi)源榜單,中文領(lǐng)域Baichua-13B也大幅超越Llama2。

2023-08-29
SuperCLUE 8月榜單:百川智能Baichuan-13B中國(guó)榜奪冠
8月29日消息,SuperCLUE發(fā)布中文大模型8月榜單。

長(zhǎng)按掃碼 閱讀全文