基于統(tǒng)計(jì)的中文詞義消歧技術(shù)研究.pdf_第1頁
已閱讀1頁,還剩68頁未讀 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡介

1、詞義消歧(WordSenseDisambiguation,WSD)是計(jì)算語言學(xué)和自然語言處理領(lǐng)域一個(gè)重要的研究課題,也是近些年來該領(lǐng)域的熱點(diǎn)研究問題之一。本文研究的重點(diǎn)在于統(tǒng)計(jì)詞義消歧技術(shù),它根據(jù)使用的訓(xùn)練方法的不同可以分為有指導(dǎo)和無指導(dǎo)的兩大類。早期的詞義消歧研究以基于知識的和有指導(dǎo)的機(jī)器學(xué)習(xí)方法為主,隨著計(jì)算技術(shù)和存儲技術(shù)的改進(jìn)和提高,無指導(dǎo)方法受到的重視程度越來越高。
  本文研究內(nèi)容包括以下三個(gè)方面:
  1.介紹資

2、源建設(shè)的情況。這部分包括IR-Lab分類詞典的建設(shè)和語料庫的建設(shè)兩個(gè)方面。IR-Lab分類詞典的建設(shè)對語料庫的建設(shè)以及等價(jià)偽詞的構(gòu)造提供了很大的幫助。
  2.考察了貝葉斯模型、最大熵模型、支持向量機(jī)和決策樹模型等四種數(shù)學(xué)建模方法在詞義消歧上的應(yīng)用效果。通過各個(gè)模型的比較研究,發(fā)現(xiàn)貝葉斯模型和最大熵模型性能比其它幾個(gè)模型更為理想,尤其是貝葉斯模型,在構(gòu)建和實(shí)現(xiàn)上比其它幾個(gè)模型相對要簡便易用,機(jī)器學(xué)習(xí)過程也簡潔高效。
  3.

3、提出等價(jià)偽詞概念和等價(jià)偽詞的構(gòu)造方法,并以此實(shí)現(xiàn)無指導(dǎo)的詞義消歧方法。利用得到的兩種較優(yōu)的機(jī)器學(xué)習(xí)方法:貝葉斯模型及最大熵模型,本文嘗試了基于等價(jià)偽詞的無指導(dǎo)詞義消歧方法,在Senseval-3的測試數(shù)據(jù)上獲得了81%的正確率,明顯優(yōu)于相應(yīng)的有指導(dǎo)方法。實(shí)驗(yàn)表明等價(jià)偽詞的概念以及建立在等價(jià)偽詞基礎(chǔ)上的無指導(dǎo)詞義消歧技術(shù)為探索詞義消歧的新技術(shù)提供了一個(gè)新的思路和方法。
  綜上所述,本文在機(jī)器學(xué)習(xí)和無指導(dǎo)的詞義消歧方法上都作了一些有

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論