(資料圖)
藍(lán)鯨教育5月10日訊，日前，中文通用大模型綜合性評(píng)測(cè)基準(zhǔn) SuperCLUE 正式發(fā)布。該基準(zhǔn)測(cè)試可通過(guò)多個(gè)維度，考驗(yàn)?zāi)壳笆忻嫔现髁鞯闹形?GPT 大模型的能力。
利用 SuperCLUE 測(cè)試基準(zhǔn)，該機(jī)構(gòu)對(duì)市面上主流的支持中文的通用大模型進(jìn)行了評(píng)測(cè)與排名。結(jié)果顯示，GPT-4 排名第一，已經(jīng)非常接近人類的能力。國(guó)產(chǎn)大模型中，訊飛科技研發(fā)的星火認(rèn)知大模型總排名第三，國(guó)內(nèi)排名第一。由于大模型不斷迭代，該排行榜會(huì)定期更新，并于CLUEbenchmarks官方網(wǎng)站公示。
據(jù)介紹，該基準(zhǔn)測(cè)試關(guān)注的問(wèn)題包括：中文大模型在不同任務(wù)上的表現(xiàn)如何？與國(guó)際代表性模型相比，中文大模型的表現(xiàn)達(dá)到了何種程度？中文大模型與人類表現(xiàn)相比如何？SuperCLUE 測(cè)試基準(zhǔn)可以考驗(yàn)?zāi)壳笆忻嫔现髁鞯闹形?GPT 大模型的能力，評(píng)測(cè)維度涵蓋基礎(chǔ)能力、專業(yè)能力、中文特性。
責(zé)任編輯：
關(guān)鍵詞：
