面向物聯(lián)網(wǎng)的信息存儲技術研究.pdf_第1頁
已閱讀1頁,還剩61頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

1、隨著物聯(lián)網(wǎng)技術的發(fā)展,物聯(lián)網(wǎng)技術在生活和工業(yè)生產中的應用也越來越多,其每天產生的數(shù)據(jù)量也在飛快地增長。物聯(lián)網(wǎng)數(shù)據(jù)有異構性、海量性、時效性等特點,這些特點表明其數(shù)據(jù)形式多以海量的小文件形式為主。Hadoop是目前被業(yè)界廣泛用于處理大規(guī)模數(shù)據(jù)的一種開源云計算技術,然而,Hadoop云計算技術對海量物聯(lián)網(wǎng)小文件數(shù)據(jù)處理存在執(zhí)行效率不高和資源占用率過高等不足之處,故改進Hadoop云計算技術對海量物聯(lián)網(wǎng)數(shù)小文件數(shù)據(jù)的處理有著重要的研究意義。

2、r>   本文針對物聯(lián)網(wǎng)數(shù)據(jù)的海量小文件形式的特點和Hadoop技術中HDFS存儲海量小文件的不足,本文利用Hadoop云計算技術對具有二維坐標屬性的海量物聯(lián)網(wǎng)小文件進行聚類處理,并提出了相關存儲優(yōu)化策略。首先,本文采用能夠自動確定簇個數(shù)的G均值算法對物聯(lián)網(wǎng)數(shù)據(jù)進行聚類分析,用四叉樹結構索引簇中的文件。然后,采用基于文件距離緊密程度合并策略將簇中的小文件合并成一個包含多個存儲塊的大文件,將每個塊中的文件索引存儲在該塊的頭部。最后,采用

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業(yè)或盈利用途。
  • 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論