基于Hadoop平臺的地震波形數據處理方法研究.pdf_第1頁
已閱讀1頁,還剩72頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權說明:本文檔由用戶提供并上傳,收益歸屬內容提供方,若內容存在侵權,請進行舉報或認領

文檔簡介

1、近年來國家對地震領域的發(fā)展頗為關注,地震數據分析成為地震領域的熱門話題。隨著科學技術的不斷發(fā)展,地震數據采集儀器的精密度有了很大提升。分散在國內的地震監(jiān)測臺站數量不斷增加,這使得數據采集量大增。國家臺網中心每天匯集約40GB的地震波形數據,如此海量的數據給數據存儲和分析造成了很大的挑戰(zhàn)。為了方便傳輸,通常將波形數據保存為SEED格式。在進行地震數據分析前,需要首先將SEED格式文件解壓縮,得到原始樣本序列。現(xiàn)有方法是利用串行思想,每次只

2、能夠解壓縮單個文件,無法完成批量文件的解壓縮操作。由于地震數據在采集過程中會收集到一些干擾信號,這些信號會影響地震分析的準確性,因此在解壓縮得到原始樣本序列后,需要先對序列進行濾波處理,保證地震數據分析的質量。面對大量地震波形數據時,串行濾波方法存在計算速度慢,處理效率較低的問題。
  Hadoop是開源的分布式計算框架,也是目前使用較廣泛的云計算技術之一。其核心組件分布式文件系統(tǒng)可以實現(xiàn)海量數據的可靠存儲,MapReduce編程

3、模型可以通過并行化方式處理大規(guī)模數據,縮短數據處理時間,因此可以利用Hadoop平臺來解決上述問題。本文從如下方面進行了研究:
  (1)基于地震波形數據文件的格式特征,對在Hadoop平臺上并行處理該類數據文件進行可行性分析。
  (2)利用MapReduce并行編程模型思想,設計了與地震波形數據文件相匹配的輸入格式,提出并實現(xiàn)了批量地震波形數據文件的并行解壓縮算法。其中采用二次排序方法確定通道內數據記錄的排列順序,保證解

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網頁內容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
  • 4. 未經權益所有人同意不得將文件中的內容挪作商業(yè)或盈利用途。
  • 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內容本身不做任何修改或編輯,并不能對任何下載內容負責。
  • 6. 下載文件中如有侵權或不適當內容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論