1、當(dāng)代科技革命的主要特征，是以計(jì)算機(jī)為支持手段進(jìn)行信息處理。隨著計(jì)算機(jī)的廣泛應(yīng)用，計(jì)算機(jī)已由過去的數(shù)據(jù)處理、信息處理發(fā)展到現(xiàn)在的知識(shí)處理，對(duì)語言文字的信息處理。而語言是人類最重要的交際工具，是信息最主要的負(fù)荷者。在我國(guó)，將計(jì)算機(jī)應(yīng)用于事務(wù)處理、辦公自動(dòng)化、印刷排版、情報(bào)檢索、機(jī)器翻譯、人機(jī)對(duì)話等方面，都離不開中文，因?yàn)樗羞@些方面的信息，都是以中文作為其載體的，因而語言文字的信息處理成為我國(guó)信息化建設(shè)的“瓶頸”。 中文信息處理技術(shù)

2、是重要的計(jì)算機(jī)應(yīng)用技術(shù)，它已滲透到計(jì)算機(jī)應(yīng)用的各個(gè)領(lǐng)域，如計(jì)算機(jī)網(wǎng)絡(luò)、數(shù)據(jù)庫技術(shù)、軟件工程等。國(guó)務(wù)院制定的國(guó)家中長(zhǎng)期科技發(fā)展綱領(lǐng)中明確指出：“中文信息處理技術(shù)是高新技術(shù)發(fā)展的重點(diǎn)”。我國(guó)軟件產(chǎn)業(yè)發(fā)展的重點(diǎn)是中文信息處理軟件，中文信息處理的發(fā)展已經(jīng)得到國(guó)家的重視。 自然語言處理是人工智能的重要分支。詞是自然語言處理系統(tǒng)中重要的知識(shí)載體與基本操作單元。在書面漢語中詞與詞之間沒有明顯的切分標(biāo)志。于是在中文信息處理中漢語自動(dòng)分詞這一研究

3、領(lǐng)域應(yīng)運(yùn)而生，并成為中文信息處理中的基礎(chǔ)課題。 書面漢語自動(dòng)分詞是中文信息處理中的重要步驟，它是文本校對(duì)、機(jī)器翻譯、文本分類、文本檢索、計(jì)算機(jī)人機(jī)接口等諸多中文信息應(yīng)用領(lǐng)域的基礎(chǔ)。通過對(duì)自動(dòng)分詞技術(shù)的深入研究，開發(fā)出高質(zhì)量，多功能的分詞系統(tǒng)，必將促進(jìn)中文信息處理系統(tǒng)更加廣泛的應(yīng)用。 漢語自動(dòng)分詞是漢語信息處理的前提，是目前中文信息處理中的難點(diǎn)之一，它也是中文自然語言理解、機(jī)器翻譯中最基本的一步。而漢語自動(dòng)分詞的難點(diǎn)在于對(duì)

4、歧義字段的切分。這主要是因?yàn)闈h語自動(dòng)分詞的劃分往往存在著歧義性，需用到一定的語境知識(shí)，需要在一定的語境上下文參照下確定它的真實(shí)含義，而語境上下文的利用反過來又依賴于一個(gè)個(gè)切分好的詞，這樣就有一個(gè)分詞與語境相互依賴的關(guān)系。 為了進(jìn)一步提高漢語自動(dòng)分詞的準(zhǔn)確性，本文通過分析漢語特點(diǎn)，提出了基于語境的漢語自動(dòng)分詞方法。通過改進(jìn)的最大分詞算法來對(duì)中文進(jìn)行初切分，然后對(duì)于有歧義切分句子進(jìn)行消歧處理，運(yùn)用詞的語境知識(shí)，也就是上下文信息來處理