快科技10月26日消息，近日SuperCLUE發(fā)布了最新的中文大模型10月榜單，GPT4繼續(xù)霸榜位列第1，vivo自研大模型vivoLM以70.74的成績(jī)位列第4，在國(guó)內(nèi)大模型中排行第1。

緊隨vivoLM后面的分別是月之暗面的Moonshot、百度的文心一言4.0和商湯科技的SenseChat 3.0。

SuperCLUE主要考察大模型在中文能力上的表現(xiàn)，包括專業(yè)知識(shí)技能、語(yǔ)言理解與生成、AI 智能體和安全四大能力維度的上百個(gè)任務(wù)。

本次評(píng)測(cè)共選取了目前國(guó)內(nèi)外最具代表性的20個(gè)通用大語(yǔ)言模型，與9月相比新增了月之暗面的Moonshot、百度的文心一言4.0、科大訊飛的星火V3.0、vivo的vivoLM和阿里云的Qwen-14B。

本次評(píng)測(cè)數(shù)據(jù)集為全新的3754道測(cè)試題，其中包括606道多輪簡(jiǎn)答題和3148道客觀選擇題，最終評(píng)選出總排行榜等5大榜單。

評(píng)測(cè)結(jié)果顯示，國(guó)內(nèi)第一梯隊(duì)大模型格局已基本形成，頭部的幾個(gè)中文大模型已經(jīng)與GPT3.5極為接近，但與GPT4的距離依然遙遠(yuǎn)，尚未發(fā)現(xiàn)有對(duì)標(biāo)和媲美GPT4的跡象。

SuperCLUE還認(rèn)為在今年第四季度內(nèi)將會(huì)出現(xiàn)全面超越GPT3.5的通用大模型，但如何趕超GPT4，又會(huì)成為擺在所有中文模型研發(fā)機(jī)構(gòu)面前的新難題。