古籍?dāng)?shù)字化與古典文學(xué)研究的未來 鄭永曉 |
內(nèi)容提要：具有前瞻性眼光的學(xué)者決不能僅僅滿足于把計算機(jī)當(dāng)作一個檢索工具。人類如何適應(yīng)并利用其獨特的思維方式，在古籍?dāng)?shù)字化的基礎(chǔ)上將古代文學(xué)研究提升到一個更高境界，是廣大文學(xué)研究者和IT業(yè)者共同面對的挑戰(zhàn)。計算機(jī)人工智能首先在古籍整理方面大有用武之地，在古典文學(xué)研究方面也有其契合點。文章同時對版本意識淡薄、字庫設(shè)計不規(guī)范以及缺乏合適的程序設(shè)計語言等古籍電子化過程中面臨的問題作了探討。 關(guān)鍵詞：古籍?dāng)?shù)字化；古代文學(xué)研究方法；人工智能 作者簡介：鄭永曉，男，1963年生。2003年畢業(yè)于中國社科院研究生院，獲博士學(xué)位，現(xiàn)為中國社科院文學(xué)所副研究員。發(fā)表過專著《黃庭堅年譜新編》等。
IT技術(shù)的飛速發(fā)展在人文、社會科學(xué)中的一個重要表現(xiàn)就是傳統(tǒng)紙質(zhì)文本向電子文本的轉(zhuǎn)化，亦即報刊、書籍的數(shù)字化，這其中又以古籍?dāng)?shù)字化的成果最為引人注目。中國傳統(tǒng)古籍浩如煙海，二千馀年來，沒有被充分開掘和利用者不計其數(shù)，因此，對古籍予以數(shù)字化的迫切性和必要性較之現(xiàn)代書籍而言，顯然有過之而無不及。相關(guān)機(jī)構(gòu)正是著眼于數(shù)字化古籍在應(yīng)用方面具有深廣的潛力，且一般不存在版權(quán)問題，才投入大量人力物力，先后完成了電子版《四庫全書》、《四部叢刊》、《二十五史》、《全唐詩》、《全宋詩》等一系列有關(guān)傳統(tǒng)文獻(xiàn)的數(shù)據(jù)庫，而廣大文史工作者也確實受惠于這些數(shù)字化古籍。此足以說明，數(shù)字化古籍對古典文學(xué)研究不僅必要而且必將有著十分光輝的未來。具有前瞻性眼光的學(xué)者決不能僅僅滿足于把計算機(jī)當(dāng)作一個檢索工具，滿足于把計算機(jī)檢索到的資料復(fù)制到自己的文章中，以省卻自己的翻檢之勞。計算機(jī)具有自己的思維特點，人類如何適應(yīng)并利用其獨特的思維方式，將人的創(chuàng)造性思維與計算機(jī)的強(qiáng)大功能有機(jī)結(jié)合起來，把古代文學(xué)研究提升到一個更高境界，是廣大文學(xué)研究者和IT業(yè)者共同面對的挑戰(zhàn)。令人欣慰的是，已經(jīng)有一些機(jī)構(gòu)和學(xué)者在這方面做了非常有益的探索并取得了可觀的成績，如北京大學(xué)中文系李鐸博士主持開發(fā)的《全宋詩電子分析系統(tǒng)》，即具有較高的智能化特色。筆者有幸使用過這一系統(tǒng)，并拜讀了李鐸博士和王毅先生《關(guān)于古代文獻(xiàn)信息化工程與古典文學(xué)研究之間互動關(guān)系的對話》（以下簡稱《對話》）①，深感獲益匪淺。因此，愿意把自己近年來有關(guān)此問題的一些想法發(fā)表在此處，作為這一精彩文章的蛇足之論，欠妥之處，還請李鐸、王毅先生和眾方家批評指正。 一、計算機(jī)智能化的前景及其對古典文學(xué)研究的影響 伴隨計算機(jī)科學(xué)技術(shù)的日新月異及其在各行各業(yè)中的廣泛應(yīng)用，人們對計算機(jī)軟硬件的要求愈來愈高，對計算機(jī)科學(xué)所能攻克的難題也愈來愈抱有更高的期望。于是，學(xué)術(shù)界很自然地進(jìn)而提出究竟計算機(jī)能否具備類似人類的思維方式，完成人類大腦所能支配的工作，亦即計算機(jī)能否實現(xiàn)人工智能的問題，由此誕生了二十一世紀(jì)三大尖端技術(shù)之一的“人工智能”。②作為計算機(jī)科學(xué)的一個重要分支，人工智能是一門研究運用計算機(jī)模擬和延伸人腦功能的綜合性學(xué)科,其目的在于讓計算機(jī)這樣的“機(jī)器”能夠像人一樣思考和判斷，具有人類的某些智慧以及解決復(fù)雜問題的能力。信息技術(shù)的這一前沿分支，其研究、應(yīng)用和發(fā)展在一定程度上決定著計算機(jī)科學(xué)的發(fā)展方向。 那么，人工智能這樣尖端的科學(xué)，與我們的古典文學(xué)研究究竟有什么關(guān)系呢？據(jù)筆者觀察，在上個世紀(jì)90年代前期，人文、社科學(xué)者利用計算機(jī)基本上僅限于打字，95年互聯(lián)網(wǎng)引入中國以后，少數(shù)學(xué)者開始嘗試?yán)镁W(wǎng)絡(luò)查閱學(xué)術(shù)資料，一些具有前瞻性眼光的公司開始制作古籍資料檢索光盤，如商務(wù)國際有限公司制作發(fā)行的《全唐詩》光盤等。90年代末至本世紀(jì)初，古籍?dāng)?shù)字化進(jìn)入迅速發(fā)展階段。1998年全國高校古籍整理委員會批準(zhǔn)立項并直接資助了“中國基本古籍庫光盤工程”，目前很多學(xué)者尤其是古代文史研究者手中使用著由迪志公司、書同文公司等開發(fā)的《四庫全書》、《四部叢刊》等，大陸、臺灣和香港各種網(wǎng)站上也提供了愈來愈多的數(shù)字化古籍文獻(xiàn)等。很顯然，經(jīng)過近十年的快速發(fā)展，數(shù)字化古籍的總量已經(jīng)十分可觀，程序提供的檢索手段也已經(jīng)相當(dāng)完善。在這種日益強(qiáng)大的檢索手段基礎(chǔ)上，如果能輔以更加智能化的統(tǒng)計、分析、綜合、判斷程序，那么以人工智能為支撐的信息技術(shù)在古籍整理和古典文學(xué)研究方面將產(chǎn)生劃時代影響，便絕非故作危辭聳聽之論。 誠然，學(xué)者個性千差萬別，學(xué)術(shù)道路、學(xué)術(shù)方法也多種多樣。計算機(jī)沒有產(chǎn)生之前的學(xué)術(shù)大師固然成就不凡，當(dāng)代學(xué)人中從未使用過電腦而能取得很大學(xué)術(shù)成就者也大有人在。但是，這并不表明信息技術(shù)的發(fā)展對這部分學(xué)者不會產(chǎn)生影響。這里有兩個因素需要特別注意：第一，傳統(tǒng)學(xué)者治學(xué)過程中對私人藏書或公共圖書館的依賴在不遠(yuǎn)的將來會不復(fù)存在。因為伴隨存儲技術(shù)的日新月異，將中國歷史上的所有古籍存儲在一張DVD光盤或一張郵票大小芯片上的可能性并不遙遠(yuǎn)。近年來，光盤存儲容量正朝著單碟20GB以上規(guī)格邁進(jìn)，而熒光多層光碟ＦＭＤ（Fluorescent Multilayer Disc）技術(shù)成熟后更使得目前CD大小的盤片可以存儲100GB的數(shù)據(jù)，第二代FMD技術(shù)將使盤片存儲量升至1TB甚至更高。③所以，盡管傳統(tǒng)古籍浩如煙海，此前從未有人能夠全部擁有，更遑論能夠全部讀完。但是，隨著存儲技術(shù)的迅速發(fā)展，將所有古籍隨身攜帶卻不再是一個遙遠(yuǎn)的夢想。第二，與傳統(tǒng)圖書的閱讀方式不同，可隨身攜帶的這些古籍是可以快速檢索、統(tǒng)計的電子文本，在不遠(yuǎn)的將來完全可以在此基礎(chǔ)上實現(xiàn)自動標(biāo)點、箋注、翻譯等功能，甚至進(jìn)而實現(xiàn)歷史年表的編撰、作家年譜的纂輯以及數(shù)字化文學(xué)史等更具智能化的功能。這就使得此前乾嘉學(xué)派那套治學(xué)功夫基本沒有了用武之地，像標(biāo)點、箋注、翻譯等工作完全可以交給機(jī)器去處理。同時，現(xiàn)代人推崇的美學(xué)分析、文本分析、文化研究等等也必將面臨重大變革，因為對文學(xué)史所作的理論和美學(xué)分析建立在對歷史文獻(xiàn)的解析、歸納之上，而一旦對文獻(xiàn)的處理發(fā)生了劃時代的變革，則整個古典文學(xué)研究方式也必將隨之變革。 總之，將電腦與人腦的長處和優(yōu)勢結(jié)合起來，將為古籍整理和古典文學(xué)研究注入一股強(qiáng)大的新生力量，在資料采集、推理求證、綜合分析等方面帶來思維方式和研究方法的革命，從整體上促進(jìn)學(xué)科發(fā)展水平的大幅提高。下文對此稍作疏解。 二、關(guān)于計算機(jī)的思維方式與古籍整理 計算機(jī)人工智能的開發(fā)在不同領(lǐng)域有不同的側(cè)重和研發(fā)方向。在人文和社會科學(xué)研究領(lǐng)域，筆者以為，開發(fā)計算機(jī)的人工智能應(yīng)側(cè)重發(fā)揮計算機(jī)“思維方式”（借用李鐸先生的提法）的長處，同時結(jié)合計算機(jī)摹擬人腦的功能。在這方面，計算機(jī)首先在古籍整理方面大有用武之地。 古籍整理主要包括標(biāo)點、校勘、箋注等工作。關(guān)于利用計算機(jī)進(jìn)行古籍標(biāo)點的問題，李鐸、王毅先生在其《對話》中已經(jīng)闡述得相當(dāng)清楚，我完全同意他們的觀點。利用計算機(jī)的自學(xué)習(xí)功能，由易到難，先選用已經(jīng)標(biāo)點，且質(zhì)量較高的古籍文本讓計算機(jī)學(xué)習(xí)、摹擬，從而不斷擴(kuò)充知識庫，在此基礎(chǔ)上完全可能實現(xiàn)對大規(guī)模古籍的標(biāo)點工作。在具體操作上，除了需要注意古漢語的規(guī)律，找出字與字之間的親和度以外，還需要讓計算機(jī)學(xué)習(xí)不同文體的特點。因為在我國傳統(tǒng)文化史上，產(chǎn)生過數(shù)十種文體，每一種文體都有不同的行文方式，計算機(jī)如能首先判斷出需要標(biāo)點的文本是何種文體，便可根據(jù)這種文體的特點和規(guī)律做出高質(zhì)量的標(biāo)點切分工作。因為多數(shù)讀者沒有編程方面的知識，我們以大家都熟知的字處理軟件，微軟WORD“工具”菜單中提供的“宏（Micro）為例，簡單驗證利用計算機(jī)標(biāo)點文本與文體的關(guān)系。④如果我們用“宏”來標(biāo)點一首不分行的七言詩，且要求排列成每聯(lián)為一行，我們只需使用Visual Basic編輯器或錄制“宏”的辦法告訴計算機(jī)從第一個字算起，至第七字后加逗號，至第十四個字后加句號及一個段落標(biāo)記（硬回車），第二十一個字后加逗號，第二十八個字后加句號及一個段落標(biāo)記，馀者以此類推。這樣一個簡單的小程序（宏）標(biāo)點一首七言詩的時間不足一秒鐘，這是因為程序設(shè)計者已經(jīng)告訴計算機(jī)或者計算機(jī)已經(jīng)能夠判斷這是一首七言詩。如果遇到一首詞，計算機(jī)能夠根據(jù)其詞牌去判斷標(biāo)點位置，無疑將做出十分精確的切分和標(biāo)點。反之，如果僅憑字詞之間的親和度以及漢語構(gòu)詞法，對于用詩、詞、曲這種文體寫成的文本，便可能出現(xiàn)誤判和錯誤標(biāo)點。例如像杜甫的拗體詩“香稻啄馀鸚鵡粒，碧梧棲老鳳凰枝”（《秋興八首》第八），如果程序在不能判斷這是一首七言詩的前提下，除了不會在“香稻”、“鸚鵡”、“碧梧”、“鳳凰”等詞語處切分外，其他字詞之后都有可能，很容易造成誤判。又如王之渙詩“羌笛何須怨楊柳，春風(fēng)不度玉門關(guān)”（《涼州詞》），如果不能事先斷定這是七言詩的話，也可能斷成“羌笛何須怨，楊柳春風(fēng)，不度玉門關(guān)”。所以，在設(shè)計這類程序時，充分考慮各種文體的特點并做出有針對性的處理是非常必要的。另外需要注意的是，不同時代的文章在行文風(fēng)格、句法、所用詞匯方面也頗有不同，計算機(jī)在處理文獻(xiàn)時固然無需判斷文本的風(fēng)格，但是不同時代文章的句法差別很大。所幸六朝以前的文章大都已有人工標(biāo)點本，屬于計算機(jī)建立知識庫時的學(xué)習(xí)對象，需要計算機(jī)大規(guī)模標(biāo)點的是唐宋以后的文獻(xiàn)，在句法方面的差異不是很懸殊，但是，像清人的文章中時常夾雜著西洋詞匯的音譯，而且各人譯法不同，這都是在設(shè)計程序時需要注意的。 古籍整理的另外一項重要任務(wù)是�？�。這是一項十分細(xì)致、龐雜的工作，人工校勘由于參校版本有限、視覺模糊等因素，難免出現(xiàn)異文不能出校，或在眾多版本具有若干異文的情況下難以確定最佳方案。如果設(shè)計合理科學(xué)，這同樣是計算機(jī)可以發(fā)揮其特長的項目。校勘的目的一是勘正錯別字，二是校出不同版本的相異之處。關(guān)于錯別字的甄別，利用計算機(jī)從事古籍整理時會涉及三種情況：第一，由于OCR軟件識別率不能達(dá)到100%正確導(dǎo)致的錯字；第二，底本本身的錯誤，包括因書寫或印刷造成的錯誤；第三，不符合現(xiàn)代漢語規(guī)范的異體字。如果不是將古籍整理成簡體文本，第三種情況按一般�？币蠖�，可以忽略，無需出校，需要處理的是第一和第二種情況造成的文字錯誤。以目前的技術(shù)和實際應(yīng)用而言，基于現(xiàn)代漢語詞匯的文本糾錯技術(shù)已經(jīng)比較成熟。在這方面，以北京某公司的產(chǎn)品“黑馬校對2004”較為突出，該軟件具有數(shù)量龐大的錯誤詞匯數(shù)據(jù)庫，查錯規(guī)則設(shè)置也比較合理，能夠輕易標(biāo)出文本中不合規(guī)范的用詞。遺憾的是，該系統(tǒng)僅適用于作為現(xiàn)代漢語文字載體的報刊雜志的�？惫ぷ�，如用于校對艱深古奧的古漢語，尚難以勝任。但是，該軟件所使用的技術(shù)原理和設(shè)計思路應(yīng)該同樣適用于古籍文本的�？�，只是詞匯庫的設(shè)置要求更具專業(yè)特點，如能有精于古漢語和古代文學(xué)方面的專家與IT人士攜手，在技術(shù)上是不難辦到的。當(dāng)然，校勘古籍不能僅僅校正詞匯組合方面的錯誤，必然也涉及到語句中的單字，涉及到在不同語法狀態(tài)下單字的對錯。這就要求計算機(jī)在學(xué)習(xí)積累正確漢語語法結(jié)構(gòu)的基礎(chǔ)上，正確判斷一個字詞在某句中的位置是否背離了古代漢語的語法規(guī)則，這方面的技術(shù)目前還不成熟，亟需加大研發(fā)力度，早日達(dá)到應(yīng)用水平。所幸對古籍校勘而言，如果底本十分清晰，OCR軟件識別率很高，那么由于識別問題造成的差錯基本不存在。如果選用底本精良，也基本上不存在原書作者或印刷造成的錯誤。剩下的問題就是拿底本與他本互校，比較其異同，標(biāo)出參校本與底本的相異之處，而這正是計算機(jī)的長項。微軟WORD“工具”菜單中有一個不常為人所用的工具—“比較并合并文檔”，即可用于比較兩篇文檔的異同。當(dāng)然，微軟開發(fā)的這一工具如用于中國傳統(tǒng)古籍�？�，尚嫌簡略，不夠?qū)I(yè)。從程序設(shè)計角度而言，在技術(shù)上讓計算機(jī)比較底本與參校本的異同，并自動生成校記是完全可以實現(xiàn)的。 至于用計算機(jī)從事古籍的箋注工作，似乎比用于標(biāo)點艱深古奧的文本更具可行性。為達(dá)到這一目的，我們首先需要建立一個龐大的冷僻字詞和典故數(shù)據(jù)庫。計算機(jī)在掃描文本時，每當(dāng)發(fā)現(xiàn)有與數(shù)據(jù)庫中的字詞相似或相同的情況，則即刻調(diào)用該字詞的解釋并寫到程序設(shè)定的位置，如該冷僻字詞之后或章節(jié)、段落之后。設(shè)想我們在讀到某篇比較難以理解的文章時，鼠標(biāo)一點，相關(guān)注釋即刻添加到文本之中，即使不能保證100%正確，至少讀懂該文章應(yīng)該沒有問題。當(dāng)然，鑒于漢語言的構(gòu)詞特點和文學(xué)修辭的豐富多彩，同一個典故會有多種表述方法，曹操《短歌行》：“月明星稀，烏鵲南飛。繞樹三匝，何枝可依”，后人常借用其意寄托羈旅漂泊之感，如駱賓王《望鄉(xiāng)夕泛》：“今夜南枝鵲，應(yīng)無繞樹難�！崩钊A《海上生明月》：“素娥嘗藥去，烏鵲繞枝驚�！蓖瑯拥牡涔剩樫e王和李華的用法并不一樣，此外還有“繞樹枝”、“三繞枝”、“繞鵲”等等不同用法。所以在設(shè)計這樣一個程序時，一要保證冷僻字詞和典故數(shù)據(jù)庫盡可能全面，應(yīng)具有開放性和可擴(kuò)充性，其次應(yīng)使用模糊查詢方法，遇到非典型性用法，應(yīng)能夠自動判斷是否應(yīng)該予以箋注及調(diào)用哪一條數(shù)據(jù)做出解釋。當(dāng)然，計算機(jī)最為人熟知的長項是可以窮盡所有可以搜索到的字詞出處，這在從事箋注這類工作中更是必不可少的。根據(jù)同樣的機(jī)理，利用數(shù)據(jù)庫的排序、篩選功能輔以必要的人工也可以快速編制作家年譜、歷史年表；借鑒計算機(jī)不同語種的相互翻譯功能可以嘗試將其運用于大型古籍文獻(xiàn)的白話文翻譯�？傊�，以數(shù)字化古籍為依托，大力挖掘、開發(fā)計算機(jī)的智能化應(yīng)用，在古籍整理以及古籍整理的延伸如編制作家年譜和歷史年表方面的前景是無限廣闊的。 三、智能化計算機(jī)在古典文學(xué)研究領(lǐng)域的應(yīng)用 計算機(jī)智能化在古籍整理中的應(yīng)用既略如上述，那么，如果進(jìn)入到古典文學(xué)研究這樣一個需要人的高智商和個體情感的高度投入才能從事的創(chuàng)造性領(lǐng)域，其前景又當(dāng)如何？ 李鐸、王毅先生在其《對話》中，談到了“人機(jī)互動關(guān)系及人機(jī)各自的‘權(quán)界'問題”，對人的心智和情感作為文學(xué)研究靈魂的重要性，以及電子公共信息平臺對文學(xué)研究的拓展作了精彩的闡述，筆者深有同感，因而不打算重復(fù)他們二位的觀點，僅就高度智能化的計算機(jī)與未來的古典文學(xué)研究之關(guān)系及可能性作一個展望和預(yù)期性的推測。 筆者以為，我們不能把計算機(jī)與人之間的“權(quán)界”絕對化和擴(kuò)大化。誠如李鐸先生所言，計算機(jī)可能永遠(yuǎn)也無法完全替代人來“思考”，并且用計算機(jī)充當(dāng)人來思考，解決人能夠輕易解決的問題在成本方面也不劃算。所以，計算機(jī)不必模擬人腦，人也沒必要依照計算機(jī)的方式思考問題。筆者在對此深表贊同的同時也想補(bǔ)充一點，即從信息科學(xué)的總體發(fā)展而言，計算機(jī)將愈來愈人性化和具備一定程度的思維能力是一個必然的發(fā)展趨勢，這其中的關(guān)鍵在于計算機(jī)程序是人設(shè)計和編寫的，人的思維控制著計算機(jī)的思維，計算機(jī)的思維是人腦思維的延伸而并非人腦思維的異化。伴隨人工智能科學(xué)的成熟，計算機(jī)具備一定的人腦思維能力并非天方夜譚，這種摹擬的人腦思維能力即使還處于非常幼稚、膚淺的階段，如與計算機(jī)本身所固有的優(yōu)勢，計算機(jī)的思維方式相結(jié)合，也很可能結(jié)出某些令人驚嘆的碩果。假定某些需要人工解決的問題相對比較簡單且數(shù)量龐大，那么，伴隨計算機(jī)軟硬件的飛速發(fā)展，計算速度的幾何級增長，以及智能化程度的逐步提高，利用計算機(jī)進(jìn)行預(yù)處理仍然是可行的，富有成果的。例如，關(guān)于唐宋詩優(yōu)劣問題這樣一個持續(xù)爭論了近千年的命題，錢鍾書先生說：“唐詩多以豐神情韻擅長，宋詩多以筋骨思理見勝”⑤，繆鉞先生則說：“唐詩以韻勝，故渾雅，而貴蘊藉空靈；宋詩以意勝，故精能，而貴深折透辟。唐詩之美在情辭，故豐腴；宋詩之美在氣骨，故瘦勁。唐詩如芍藥海棠，秾華繁彩；宋詩如寒梅秋菊，幽韻冷香。”⑥這是上個世紀(jì)有關(guān)唐宋詩之別最經(jīng)典的論述。那么，這樣一種論述能否使用計算機(jī)對此進(jìn)行更精確的闡釋呢？答案是在一定范圍內(nèi)可以做到。我們可以依據(jù)現(xiàn)有技術(shù)設(shè)計程序根據(jù)題材、用韻、格律、字頻、詞頻、用典等數(shù)據(jù)來對唐宋詩的異同予以比較，根據(jù)計算機(jī)產(chǎn)生的數(shù)據(jù)和所描繪的曲線對唐宋詩的區(qū)別做出一個比較精確的判斷，從而為錢、繆二先生的論述提供有力的佐證。但是這樣一個研究還不能說很到位，因為宋詩中的某些作品在風(fēng)格上與唐詩非常相似，難分彼此，從而為錢、繆二先生的論述提供有力的佐證。但是這樣一個研究還不能說很到位，因為宋詩中的某些作品在風(fēng)格上與唐詩非常相似，難分彼此，正如錢鍾書先生在《談藝錄》中所說：“唐詩、宋詩，亦非僅朝代之別，乃體格性分之殊。天下有兩種人，斯分兩種詩�！笨娿X先生在《論宋詩》中也說：“雖唐詩之中，亦有下開宋派者，宋詩之中，亦有酷肖唐人者。”南京大學(xué)莫礪鋒先生通過證明《唐詩三百首》所收唐人張旭之詩《桃花溪》實為宋人蔡襄之作《渡南澗》，推論出唐宋詩之間的差別沒有想象的那樣大。⑦既然如此，計算機(jī)在掃描分析《全唐詩〉》、《全宋詩》各自的用韻、格律、字頻等要素之后，雖然可以從整體上，從比較宏觀的角度比較出唐宋詩之間在某些方面的異同，卻還并不能從微觀角度判斷宋詩中哪些詩作是典型的宋詩，哪些詩作酷肖唐詩，近二十五萬首宋詩中有多少作品可以劃歸“唐詩”范疇，多少作品屬于典型的“宋詩”范疇。要解決這個問題，就需要計算機(jī)作出進(jìn)一步分析。首先我們需要在上述唐宋詩數(shù)據(jù)比較所產(chǎn)生曲線的基礎(chǔ)上，確定一個適當(dāng)?shù)淖鴺?biāo)作為唐宋詩的分界點，由于這個分界點是建立在對全部《全唐詩》和《全宋詩》的有關(guān)數(shù)據(jù)進(jìn)行窮盡分析的基礎(chǔ)之上，應(yīng)該能夠確切地劃分出唐宋詩各自在題材、體裁、用韻、格律、字頻、詞頻等方面的不同特征。用這些數(shù)據(jù)為唐宋詩各自制作一個虛擬模型，而后再依照這個模型去比照每一首唐宋詩作，即可區(qū)分出哪些作品屬于“唐詩”，哪些作品屬于“宋詩”，以及各自所占比例如何？這里所謂“唐詩”或“宋詩”是指風(fēng)格意義上的區(qū)分，并非唐人或宋人所作的詩篇。 在這個事例中，計算機(jī)按照事先設(shè)計的程序，掃描分析唐宋詩歌的字頻、詞頻等，顯然是在發(fā)揮計算機(jī)的長處，屬于運用計算機(jī)的“思維方式”；而在確定哪首作品屬于“唐詩”或“宋詩”的過程中，是判斷每首詩的格律、用韻、題材等方面的特征是否與“唐詩”或“宋詩”相符合，這顯然是在運用人的邏輯，只不過計算機(jī)做得更快而已。當(dāng)然，無論是計算機(jī)還是唐宋詩歌研究方面非常有素養(yǎng)的專家，在這一問題上都很難做到百分之百的正確無誤。因為這個命題包含著審美判斷，并非純數(shù)理的結(jié)構(gòu)化問題，并不能單純依靠數(shù)字比例的大小來確定是或否。命題本身的性質(zhì)導(dǎo)致學(xué)術(shù)界很難就“唐詩”或“宋詩”的特征問題達(dá)成一個沒有疑義的定論，而計算機(jī)程序設(shè)計者根據(jù)這些還不屬于定論的指導(dǎo)意見去設(shè)計程序，必然會把這種不確定性帶入計算機(jī)的思維中。但問題的另一面卻足以使我們大受鼓舞，盡管計算機(jī)是在按照人所發(fā)出的一些還不十分完善的指令去執(zhí)行任務(wù)，但因為計算機(jī)能夠?qū)φ麄�唐宋詩數(shù)據(jù)進(jìn)行窮盡式掃描分析，必然能夠得出雖不全面但卻很準(zhǔn)確的一些數(shù)據(jù)。亦即我們雖然無法全部理清“唐詩”或“宋詩”在美學(xué)特質(zhì)、創(chuàng)作手法、作品風(fēng)格、章法句法、字頻詞頻等方面的異同，至少我們無法用數(shù)字表示這些異同。但是利用計算機(jī)我們卻可以就其中部分特征進(jìn)行窮盡式掃描分析，而僅把需要審美判斷的那部分排除在外。計算機(jī)在掃描全部現(xiàn)存唐宋詩歌作品以后，盡管只是就其部分可統(tǒng)計排比的特征進(jìn)行了分析，但由于這種分析是建立在全部唐宋詩歌作品之上，仍然具有極其廣泛的代表性，所以其結(jié)論仍然是相當(dāng)可靠的。按照這個結(jié)論制作的虛擬模型用于比照每一首具體詩作，所得結(jié)論自然也相對更科學(xué)縝密一些。在這一個案中，既充分發(fā)揮了計算機(jī)的特長，也摻雜著人工智能因素，計算機(jī)并非僅僅承擔(dān)統(tǒng)計工作，它要在人的協(xié)助下，運用復(fù)合條件綜合作出自己的判斷。多年來我們對宋詩的特征、唐宋詩的優(yōu)劣、宋詩接受唐詩的影響等問題沒有一個十分明晰的結(jié)論，計算機(jī)顯然可以幫助我們將這一研究向前推進(jìn)一大步。 上述例證充分說明即使在比較復(fù)雜的研究中，在歷來只屬于人所從事的研究的范圍內(nèi)，計算機(jī)也大有可為。推而廣之，在某種意義上而言，利用計算機(jī)治學(xué)與傳統(tǒng)治學(xué)方法其實并無本質(zhì)不同。治學(xué)的一般步驟無非第一收集材料，第二論證推理，最后得出結(jié)論，這與計算機(jī)的工作流程幾乎沒有什么不同，而計算機(jī)只有做得更好。計算機(jī)的特長在于海量數(shù)據(jù)的存儲、運算，包括對數(shù)據(jù)的排序、篩選、統(tǒng)計和分類等，尤其善于窮盡文獻(xiàn)，發(fā)現(xiàn)知識，并推導(dǎo)出結(jié)論。這與人文研究工作的一般過程，即確立選題，閱讀文獻(xiàn)，篩選分類，統(tǒng)計分析，得出結(jié)論十分相似。因此，將計算機(jī)技術(shù)運用于人文科學(xué)研究領(lǐng)域是有其契合點的，作為人文科學(xué)的代表性學(xué)科古代文學(xué)研究當(dāng)然也不例外。按照這一思路，除了美學(xué)鑒賞方面的工作計算機(jī)確實無能為力以外，伴隨計算機(jī)軟件技術(shù)的快速發(fā)展和人工智能理論的不斷完善，利用計算機(jī)從事古典文學(xué)研究的前景無疑是十分光明的。 四、面臨的問題與亟需克服的困難 人類智能的本質(zhì)特征和最高表現(xiàn)形式是創(chuàng)造。因此，計算機(jī)人工智能模擬人的智能，其難點不在于人腦所進(jìn)行的各種必然性的演繹推理，而是最能體現(xiàn)人的智能特征的創(chuàng)造性思維，是那些具有某種不確定性的歸納、類比以及模糊推理等，包括學(xué)習(xí)、修正、推理、復(fù)雜條件下的判斷等，例如能夠選擇性地搜集相關(guān)的信息（文獻(xiàn)），在沒有獲得充分信息的基礎(chǔ)上作出嘗試性的判斷，并隨時根據(jù)反饋信息調(diào)整、修正自己的運行軌跡，最終推導(dǎo)出正確的結(jié)論。 人工智能的前景雖然在本世紀(jì)前景廣闊，給人以無限遐想。但這并不表明在其運用于古典文學(xué)研究的進(jìn)程中毫無阻礙，一片坦途。李鐸先生在《對話》一文中談到了文獻(xiàn)信息化過程中面臨的一些亟待解決的問題，筆者亦深表贊同，并不揣谫陋，對此稍加補(bǔ)充。 第一，版本意識淡薄。大凡從事古典文學(xué)研究的學(xué)者都不會輕視版本在學(xué)術(shù)研究中的基礎(chǔ)作用，根據(jù)不同版本的文獻(xiàn)所作的學(xué)術(shù)研究完全可能得出相反的結(jié)論，這在古典文學(xué)研究中屬于常識問題。但在近年來古籍文獻(xiàn)的數(shù)字化過程中這一問題卻被嚴(yán)重忽略。除了電子版《四部叢刊》、《景印文淵閣四庫全書》這些按照特定版本所作的數(shù)字化文獻(xiàn)以外，多數(shù)網(wǎng)站和光盤提供的電子版古籍只追求數(shù)據(jù)量的龐大而極少注意文獻(xiàn)的版本。而眾多的用戶也滿足于從這些電子文本中查詢到所需文獻(xiàn)后再去核對印刷版書籍。如果僅僅滿足于電子版書籍的查詢功能，則此種狀況長期延續(xù)下去本無不可，但若想在此基礎(chǔ)上開發(fā)更深層次的功能，尤其是以此為研究平臺，從事一些帶有研究性質(zhì)的開發(fā)，則不講版本的現(xiàn)狀殊堪憂慮。 第二，字庫設(shè)計不規(guī)范。為使計算機(jī)能夠處理中文文獻(xiàn)，國家有關(guān)機(jī)構(gòu)和國際標(biāo)準(zhǔn)化組織先后制訂了GB2312，GB18030以及Unicode3.0等中國大陸和臺灣地區(qū)以及韓國等字符規(guī)范標(biāo)準(zhǔn)。微軟Windows2000以上版本支持的“方正超大字符集”即含有65531個字符，數(shù)量不可謂不大，但若用于古籍整理仍嫌不夠?qū)I(yè)，仍有很多冷僻字不能輸入。因而如何進(jìn)一步規(guī)范古籍?dāng)?shù)字化過程中的字庫問題，包括簡繁字處理、異體字處理、冷僻字輸入等仍然是IT業(yè)者和廣大文史研究者需要共同面對的事項。 第三，缺乏合適的程序設(shè)計語言。數(shù)據(jù)庫技術(shù)發(fā)展到現(xiàn)在已經(jīng)是一門十分成熟的技術(shù)，功能強(qiáng)大的數(shù)據(jù)庫程序設(shè)計語言也有多種。但是這些語言若移植到古典文獻(xiàn)處理方面，便難免有削足適履之感。況且某些優(yōu)秀的語言掌握人數(shù)太少，尚未能運用于古籍整理和古文獻(xiàn)的分析。如1970年由英國愛丁堡大學(xué)柯瓦斯基(R.Kowalski)首先提出的以邏輯為基礎(chǔ)的程序設(shè)計語言Prolog(ProgramminginLogic)，非常適合于自然語言理解，關(guān)系數(shù)據(jù)庫以及邏輯推理等人工智能研究領(lǐng)域，在此基礎(chǔ)上建立的可視化邏輯程序設(shè)計語言Visual Prolog是基于Windows的智能化編程工具，更加擅長表達(dá)人的思維和推理規(guī)則。這類語言目前尚未在國內(nèi)流行，運用于古籍文獻(xiàn)的分析處理更可能遙遙無期。 此外，將計算機(jī)運用于古籍整理和古典文學(xué)研究還面臨著其他一系列困難，如由于資金匱乏，很難吸引到高水平的程序員投身于此；從事古典文學(xué)研究者對計算機(jī)了解不深，制約了計算機(jī)在古典文學(xué)研究方面的應(yīng)用；亟待數(shù)字化的古籍?dāng)?shù)量太多，大量古籍屬于善本、孤本、鈔本，字跡不清晰，OCR技術(shù)難以識別，人工錄入成本太高；商業(yè)因素的介入，各公司推出的電子文本格式混亂，沒有統(tǒng)一的標(biāo)準(zhǔn)，難以兼容等等。 總之，加快古籍文獻(xiàn)的數(shù)字化進(jìn)程，建立完善的古文獻(xiàn)數(shù)字化平臺，對于古典文學(xué)研究的未來有著極其重要的意義。只要我們對其中可能遇到的困難有充分的準(zhǔn)備和行之有效的應(yīng)對辦法，就一定能夠使古典文學(xué)研究得到跨越式發(fā)展。 注釋： ①《文學(xué)遺產(chǎn)》2005年第1期。 ②人工智能英文名稱為Artificial Intelligence，簡稱AI，另外兩項尖端技術(shù)為“基因工程”和“納米科學(xué)”。 ③按，1TB等于1024GB，1GB等于1024MB，1MB等于1024KB，1KB等于1024字節(jié)，可存儲512個漢字。因此，如以純文本格式存儲數(shù)據(jù)，則1TB的盤片可存儲549,755,813,888個漢字。 ④“宏”是一系列WORD命令和指令的組合，這些組合構(gòu)成一個單獨的命令，可以用來快速完成經(jīng)常重復(fù)的編輯任務(wù)。 ⑤《談藝錄》）第2頁，中華書局1984年9月出版。 ⑥《論宋詩》，見《詩詞散論》，上海古籍出版社1982年11月出版。 ⑦《〈唐詩三百首〉中有宋詩嗎？》，《文學(xué)遺產(chǎn)》2001年第5期。 原刊《文學(xué)遺產(chǎn)》2005年05期 |
 |