12月11日，記者從南京農(nóng)業(yè)大學(xué)獲悉，該校信息管理學(xué)院王東波教授研究團(tuán)隊(duì)研發(fā)的“荀子”古籍大語(yǔ)言模型發(fā)布，這是國(guó)內(nèi)首個(gè)專門應(yīng)用于古籍處理與研究的智能工具，包含了《四庫(kù)全書》在內(nèi)的古籍文獻(xiàn)超20億字大型語(yǔ)料庫(kù)，能夠?qū)崿F(xiàn)自然語(yǔ)言理解、自動(dòng)翻譯、詩(shī)歌生成、自動(dòng)標(biāo)引等多項(xiàng)功能，作為開(kāi)源的、公益的研究成果，該模型已在GitHub、ModelScope等網(wǎng)站開(kāi)源。CQ2新江南網(wǎng)|江南區(qū)域知名綜合門戶網(wǎng)

通訊員 楠秾宣 揚(yáng)子晚報(bào)/紫牛新聞?dòng)浾?王赟CQ2新江南網(wǎng)|江南區(qū)域知名綜合門戶網(wǎng)

為何取名“荀子”？據(jù)王東波介紹，荀子，不僅是我國(guó)先秦時(shí)期偉大的樸素唯物主義的思想家,也是一位散文大家。在對(duì)他作品的深入研討中團(tuán)隊(duì)發(fā)現(xiàn),他在語(yǔ)言學(xué)理論的闡述上也是一位開(kāi)拓者，命名荀子是為了紀(jì)念這位中國(guó)歷史上的語(yǔ)言學(xué)先驅(qū)。對(duì)于普通受眾而言，想要走近繁體、豎版、未添加句讀的古文不是一件容易的事，而“荀子”的上線意味著在智媒時(shí)代，和古籍對(duì)話成為可能。CQ2新江南網(wǎng)|江南區(qū)域知名綜合門戶網(wǎng)

“咱們請(qǐng)它以金陵為主題，生成一首五言古詩(shī)�！蓖鯑|波現(xiàn)場(chǎng)演示了“荀子”的智能寫詩(shī)功能，指令一輸入，系統(tǒng)便生成了一首堪稱絕妙的原創(chuàng)古詩(shī)：“秦淮佳麗地，城闕望中迷。柳暗青絲發(fā)，花香碧玉衣。歌樓留夜色，畫閣斂春暉。細(xì)雨輕舟去，雙魚(yú)夢(mèng)澤飛�！�CQ2新江南網(wǎng)|江南區(qū)域知名綜合門戶網(wǎng)

除此之外，古文的閱讀理解、標(biāo)點(diǎn)添加，以及將古漢語(yǔ)翻譯為現(xiàn)代漢語(yǔ)，這些讓受眾難啃的“硬骨頭”，“荀子”可以輕松拿下。CQ2新江南網(wǎng)|江南區(qū)域知名綜合門戶網(wǎng)

對(duì)于領(lǐng)域?qū)＜叶裕梢越柚败髯印蓖瓿晒偶~法分析、實(shí)體識(shí)別、關(guān)系抽取、文本分類與匹配、文本摘要等專業(yè)古籍研究處理場(chǎng)景。同時(shí)發(fā)布的基座模型，還可以讓用戶根據(jù)自己的需求，使用本地的訓(xùn)練語(yǔ)料微調(diào)“荀子”基座模型，使其在古籍下游處理任務(wù)上取得更優(yōu)越的處理性能。CQ2新江南網(wǎng)|江南區(qū)域知名綜合門戶網(wǎng)

盡管目前有200多個(gè)通用模型在各領(lǐng)域得到應(yīng)用，但古籍領(lǐng)域仍缺乏專業(yè)的大語(yǔ)言模型。功能強(qiáng)大的“荀子”到底是怎么做到化繁為簡(jiǎn)、通讀古今的呢？“首先是‘算力充足’并且‘飽讀經(jīng)書’！”王東波介紹，“荀子”的順利問(wèn)世離不開(kāi)南京農(nóng)業(yè)大學(xué)提供的高性能算力基礎(chǔ)設(shè)施支持，以及團(tuán)隊(duì)長(zhǎng)期積累的大量標(biāo)注、精加工語(yǔ)料庫(kù)，團(tuán)隊(duì)給“荀子”投喂了40億字大型混合語(yǔ)料數(shù)據(jù)。CQ2新江南網(wǎng)|江南區(qū)域知名綜合門戶網(wǎng)

“模型的構(gòu)建受算力、場(chǎng)景應(yīng)用等多方影響，但精準(zhǔn)度較高的優(yōu)質(zhì)數(shù)據(jù)，是最為關(guān)鍵的�！睋�(jù)王東波介紹，團(tuán)隊(duì)從2008年開(kāi)始接觸古籍，2013年至今一直專注于人工精標(biāo)注數(shù)據(jù)的工作�！氨热纭对狸�(yáng)樓記》，要訓(xùn)練機(jī)器標(biāo)注該典籍中的形容詞，就要首先訓(xùn)練相關(guān)人員標(biāo)注形容詞，在大量人工標(biāo)注的基礎(chǔ)上，再讓機(jī)器學(xué)習(xí)�！�CQ2新江南網(wǎng)|江南區(qū)域知名綜合門戶網(wǎng)