版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)
文檔簡介
1、離群檢測是幫助人們在繁多復(fù)雜的信息中準確而快速地獲取具有顯著異常特征信息的數(shù)據(jù)挖掘方法。其在互聯(lián)網(wǎng)、通信、金融、醫(yī)學(xué)、地質(zhì)學(xué)、天文學(xué)等領(lǐng)域得到了廣泛的應(yīng)用,如入侵檢測、信用欺詐、心電圖監(jiān)測、地震預(yù)測、新星體的發(fā)現(xiàn)等。隨著數(shù)字信息時代的到來,世界上的各種事物都開始轉(zhuǎn)向以數(shù)字為載體的存儲和傳輸,增加了人們應(yīng)用、處理各種復(fù)雜數(shù)據(jù)集的幾率。數(shù)據(jù)的數(shù)量和維度級別的不斷增加,對現(xiàn)有離群點檢測算法的準確率和高效性發(fā)出了挑戰(zhàn)。
本文在以上背景
2、下對國內(nèi)外關(guān)于離群挖掘的研究現(xiàn)狀和研究成果進行了總結(jié)分析,對離群數(shù)據(jù)挖掘的相關(guān)應(yīng)用和預(yù)處理等工作進行了介紹,并概述了傳統(tǒng)的離群檢測算法以及近幾年流行的新穎離群檢測算法的工作原理和它們各自的優(yōu)缺點?;谝陨希紤]到離群點在本質(zhì)上是一種小概率事件的思想,并且目前離群點檢測技術(shù)的發(fā)展趨勢逐漸接近對離群點本質(zhì)的思考和探索,本文采用了通過計算數(shù)據(jù)集中數(shù)據(jù)點的分布概率來衡量數(shù)據(jù)集不規(guī)則程度的基于信息熵的離群挖掘方法,并展開了研究。
在綜合
3、分析了近幾年來關(guān)于信息熵的離群檢測算法的發(fā)展歷程和研究成果、以及基于信息熵離群檢測算法可改進之處的情況下,本文選取了在計算復(fù)雜度、檢測率、以及數(shù)據(jù)集通用性上具有綜合優(yōu)勢的EOF(EntropyOutlierFactor)算法作為研究基礎(chǔ)。并通過改進算法對離群點的輸出處理流程,得出了能夠在局部上優(yōu)化EOF算法檢測結(jié)果的NCEOF算法。隨后,為了提高算法對于不同數(shù)量、維度、復(fù)雜程度數(shù)據(jù)集的檢測高效性和通用性,本文類比EOF計算離散屬性信息熵
4、增的思想,引入了自然最近鄰概念,以用于計算連續(xù)屬性的局部信息熵偏離度,并結(jié)合連續(xù)屬性的整體和局部權(quán)重度量,提出了基于加權(quán)自然鄰域?qū)傩院挽氐碾x群檢測算法HLEAWOF。
本文最后在UCI數(shù)據(jù)集WisconsinBreastCancer、以及KDD-Cup99部分數(shù)據(jù)上對改進后的算法展開了實驗,并在相同環(huán)境下與原EOF算法進行比較,驗證了算法的通用性以及改進有效性。并分析了算法的改進優(yōu)勢和仍然具有的不足之處。
最后,本文
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 基于條件漸增總熵和全局鄰域的局部離群點挖掘算法.pdf
- 基于鄰域要素的局部密度離群點檢測.pdf
- 基于鄰域關(guān)系的離群數(shù)據(jù)挖掘算法研究.pdf
- 基于自然最近鄰居的離群檢測算法研究.pdf
- 基于信息熵和子空間的離群數(shù)據(jù)挖掘算法研究.pdf
- 4762.基于加權(quán)熵及雙子集內(nèi)涵概念格的屬性約簡
- 基于屬性權(quán)重的局部離群點挖掘算法研究.pdf
- 基于離群點檢測的醫(yī)保欺詐檢測研究.pdf
- 基于鄰域粗糙集的屬性約簡算法研究.pdf
- 基于屬性加權(quán)和歸約的樸素貝葉斯算法研究.pdf
- 離群檢測與離群釋義算法研究.pdf
- 基于信息熵的屬性約簡算法研究.pdf
- 基于信息熵的屬性約簡方法研究.pdf
- 基于決策樹和信息熵的屬性約簡算法研究.pdf
- 基于密度差異的離群點檢測研究.pdf
- 基于距離的離群點檢測方法研究.pdf
- 基于屬性信息熵的KNN算法改進研究.pdf
- 基于信息熵的文本特征加權(quán)方法研究.pdf
- 基于NMF和相似度函數(shù)離群點檢測.pdf
- 基于廣義熵的加權(quán)模糊聚類算法研究.pdf
評論
0/150
提交評論