據(jù)悉,由美國(guó)OpenAI公司開(kāi)發(fā)的ChatGPT模型在全球點(diǎn)燃了新一輪AI革命,海內(nèi)外關(guān)注度陡增。前不久,復(fù)旦大學(xué)計(jì)算機(jī)科學(xué)技術(shù)學(xué)院邱錫鵬團(tuán)隊(duì)發(fā)布類(lèi)ChatGPT模型MOSS,新聞迅速登上微博熱搜。3月2日,復(fù)旦大學(xué)發(fā)布復(fù)旦MOSS團(tuán)隊(duì)深度訪談。
關(guān)于MOSS與ChatGPT相比,有哪些主要差異?復(fù)旦大學(xué)計(jì)算機(jī)科學(xué)技術(shù)學(xué)院邱錫鵬團(tuán)隊(duì)表示,最大差異還是參數(shù)規(guī)模。ChatGPT的參數(shù)量多達(dá)1750億個(gè),而MOSS的參數(shù)量比其小一個(gè)數(shù)量級(jí),大約是前者的1/10左右。我們選擇百億規(guī)模這樣級(jí)別的參數(shù),是因?yàn)閷W(xué)術(shù)界主要是做一些探索性的技術(shù),這個(gè)規(guī)模也在財(cái)力物力承受范圍之內(nèi)。我們認(rèn)為在這個(gè)參數(shù)級(jí)別上,這些模型也能涌現(xiàn)出一定的智能能力,我們也能賦予它們對(duì)話的能力。實(shí)驗(yàn)結(jié)果證實(shí)了我們的猜想,MOSS模型可以非常順利地與人類(lèi)進(jìn)行聊天互動(dòng)。
邱錫鵬在訪談中表示,近期的目標(biāo),是希望MOSS成為國(guó)內(nèi)技術(shù)比較領(lǐng)先的對(duì)話式語(yǔ)言模型。我們希望能堅(jiān)持做一個(gè)不為利潤(rùn)所驅(qū)使的研究機(jī)構(gòu),把研究成果無(wú)償?shù)胤窒斫o學(xué)術(shù)界,也在合法合規(guī)的前提下把研究成果開(kāi)放給業(yè)界,讓他們?nèi)プ龆ㄖ苹蛘咴谔厥忸I(lǐng)域的應(yīng)用。下一步進(jìn)行順利的話,我們會(huì)于3月底左右開(kāi)源。