并行關(guān)聯(lián)規(guī)則挖掘算法研究及其應(yīng)用.pdf_第1頁(yè)
已閱讀1頁(yè),還剩63頁(yè)未讀 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡(jiǎn)介

1、數(shù)據(jù)挖掘(DM)和知識(shí)發(fā)現(xiàn)(KDD)是從數(shù)據(jù)庫(kù)中抽取、識(shí)別出有效的、新穎的、有潛在作用的、可信的、并能最終被人理解的模式的非平凡處理過(guò)程.它適用于所有存在數(shù)據(jù)積累的領(lǐng)域.關(guān)聯(lián)規(guī)則挖掘是數(shù)據(jù)挖掘的主要模式之一,但是由于當(dāng)今的數(shù)據(jù)庫(kù)的量非常之大,在單機(jī)上進(jìn)行關(guān)聯(lián)規(guī)則挖掘顯得力不從心,隨著機(jī)群計(jì)算機(jī)的出現(xiàn),為進(jìn)行并行關(guān)聯(lián)規(guī)則挖掘提供了可能.本文將研究并行關(guān)聯(lián)規(guī)則挖掘算法,并提出一種無(wú)候選集生成的并行關(guān)聯(lián)規(guī)則挖掘算法,并將該并行關(guān)聯(lián)規(guī)則挖掘算法

2、應(yīng)用于電梯歷史數(shù)據(jù)領(lǐng)域.并行關(guān)聯(lián)規(guī)則的挖掘分為二步:首先挖掘出所有全局頻繁項(xiàng)集(根據(jù)給定最小支持度);然后生成所有強(qiáng)關(guān)聯(lián)規(guī)則(根據(jù)給定最小置信度).已有的并行挖掘算法都集中在對(duì)第一步問(wèn)題的解決上,這些并行算法所采用的都是基于Apriori思想,即各個(gè)處理機(jī)各自對(duì)本地的數(shù)據(jù)庫(kù)進(jìn)行掃描,并利用全局頻繁項(xiàng)集Lk-1產(chǎn)生候選項(xiàng)集Ck,接著計(jì)算各候選項(xiàng)的局部支持?jǐn)?shù),在各處理機(jī)之間交換支持?jǐn)?shù)得到各候選項(xiàng)的全局支持?jǐn)?shù),最終生成全局頻繁K項(xiàng)集Lk.這些

3、算法存在的缺點(diǎn)是有大量的候選項(xiàng)生成,增加了通訊量,同時(shí)也需要多次掃描數(shù)據(jù)庫(kù),增加了I/O消耗.本文提出了一種基于頻繁模式樹(shù)的并行挖掘算法,它的思想是:首先每個(gè)處理機(jī)掃描本地?cái)?shù)據(jù)庫(kù)并相互交換所有1-項(xiàng)集的支持?jǐn)?shù)得到全局頻繁1-項(xiàng)集Flist,再根據(jù)Flist將本地的數(shù)據(jù)庫(kù)壓縮成一棵頻繁模式樹(shù);各處理機(jī)從各自的FPT中得到每個(gè)頻繁1-項(xiàng)的局部條件模式基,并通過(guò)交換在指定處理機(jī)上得到該1-項(xiàng)的全局條件模式基;各處理機(jī)對(duì)其上的全局條件模式基構(gòu)造

4、條件頻繁模式樹(shù)并挖掘出以該1-項(xiàng)為尾的所有頻繁項(xiàng)集.該算法的優(yōu)點(diǎn)是無(wú)需生成候選項(xiàng)集,這就避免了多次掃描數(shù)據(jù)庫(kù)各候選項(xiàng)進(jìn)行計(jì)數(shù),減少了I/O消耗;同時(shí)只通過(guò)交換各1-項(xiàng)的條件模式基,相應(yīng)地通訊量也大減少了.實(shí)驗(yàn)也證明了該算法的高效性.此外,將該算法注冊(cè)到基于機(jī)群計(jì)算機(jī)的并行數(shù)據(jù)挖掘平臺(tái)的算法庫(kù)中,并應(yīng)用到電梯數(shù)據(jù)集,挖掘出了電梯維護(hù)數(shù)據(jù)之間的有價(jià)值的規(guī)則,對(duì)經(jīng)營(yíng)者的分析和決策提供有益的幫助和指導(dǎo).本研究得到到國(guó)家自然科學(xué)基金項(xiàng)目(6027

溫馨提示

  • 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 眾賞文庫(kù)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。

最新文檔

評(píng)論

0/150

提交評(píng)論