![](https://static.zsdocx.com/FlexPaper/FileRoot/2019-3/6/23/59a93a12-d64f-406f-855a-d0c2ae9803aa/59a93a12-d64f-406f-855a-d0c2ae9803aapic.jpg)
![基于Storm的鐵道供電監(jiān)控信息實(shí)時(shí)流計(jì)算處理研究.pdf_第1頁](https://static.zsdocx.com/FlexPaper/FileRoot/2019-3/6/23/59a93a12-d64f-406f-855a-d0c2ae9803aa/59a93a12-d64f-406f-855a-d0c2ae9803aa1.gif)
版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
1、隨著電網(wǎng)規(guī)模和容量的不斷擴(kuò)大,現(xiàn)代工業(yè)配電網(wǎng)正逐步邁向能量與信息互動(dòng),海量信息處理和智能調(diào)度相結(jié)合的發(fā)展方向。與傳統(tǒng)電網(wǎng)不同,智能配電網(wǎng)的調(diào)度監(jiān)控需要以電網(wǎng)全景實(shí)時(shí)狀態(tài)數(shù)據(jù)獲取為基礎(chǔ),越來越多的采集點(diǎn)和越來越高的設(shè)備狀態(tài)信息采樣率,使聚集設(shè)備信息的調(diào)度監(jiān)控系統(tǒng)必須快速處理龐大的數(shù)據(jù)量。考慮未來網(wǎng)絡(luò)物聯(lián)設(shè)備、新能源和電動(dòng)汽車接入設(shè)備等的互連互動(dòng),更將加劇電網(wǎng)監(jiān)測(cè)在大量狀態(tài)信息實(shí)時(shí)處理中的壓力,按照IEC61970標(biāo)準(zhǔn),以運(yùn)行態(tài)實(shí)時(shí)數(shù)據(jù)采集
2、與監(jiān)視控制系統(tǒng)的公共信息模型為例,定義一個(gè)母線電壓、饋線電流等模擬遙測(cè)類對(duì)象需50多個(gè)屬性,一個(gè)隔離開關(guān)、斷路器等狀態(tài)遙信類對(duì)象需40多個(gè)屬性,由于監(jiān)測(cè)實(shí)時(shí)數(shù)據(jù)庫多采用常駐計(jì)算機(jī)內(nèi)存處理方式,將百萬級(jí)、千萬級(jí),甚至更大量級(jí)的過量實(shí)時(shí)監(jiān)測(cè)數(shù)據(jù)全部常駐內(nèi)存,終將超出實(shí)時(shí)數(shù)據(jù)服務(wù)器的內(nèi)存容量上限,從而造成常規(guī)實(shí)時(shí)數(shù)據(jù)庫的存取性能和計(jì)算能力受限。此時(shí),數(shù)據(jù)服務(wù)器CPU面對(duì)大量監(jiān)控信息的實(shí)時(shí)訪問和交互處理壓力,可能會(huì)因?yàn)橥ㄐ判诺罁砣a(chǎn)生較大的信
3、息處理延時(shí),影響了調(diào)度監(jiān)控的實(shí)時(shí)性,因此,亟需開展有關(guān)大量實(shí)時(shí)監(jiān)測(cè)數(shù)據(jù)快速處理技術(shù)的研究。
結(jié)合電力領(lǐng)域的大數(shù)據(jù)現(xiàn)狀,學(xué)術(shù)界提出引入以批處理模式和流計(jì)算模式為主的大數(shù)據(jù)處理技術(shù)用于實(shí)現(xiàn)調(diào)度監(jiān)控海量監(jiān)測(cè)數(shù)據(jù)的分布式存儲(chǔ)和高效并行處理。但批處理模式受限于先存儲(chǔ)后處理的一般運(yùn)算流程,因此并不利于大量監(jiān)測(cè)數(shù)據(jù)的次秒級(jí)實(shí)時(shí)處理,而流計(jì)算模式憑借其全內(nèi)存計(jì)算、高可伸縮性、高容錯(cuò)性等優(yōu)勢(shì),有效避免了內(nèi)存數(shù)據(jù)庫容量的限制,為調(diào)度監(jiān)控中海量化監(jiān)
4、測(cè)數(shù)據(jù)的快速低延遲處理指明了一種全新的解決思路。
考慮到鐵道供電配電系統(tǒng)的特殊性,其對(duì)于調(diào)度監(jiān)控信息流的處理實(shí)時(shí)性將很大程度影響到鐵道供電的可靠性以及交通運(yùn)輸?shù)男熊嚢踩?。因此,本文結(jié)合實(shí)際工程應(yīng)用中海量化實(shí)時(shí)監(jiān)控信息的處理要求,構(gòu)建基于Storm的鐵道調(diào)度監(jiān)控流計(jì)算實(shí)時(shí)處理系統(tǒng),該集成系統(tǒng)以Storm流計(jì)算框架作為監(jiān)測(cè)數(shù)據(jù)的實(shí)時(shí)處理引擎,以分布式消息系統(tǒng)Metamorphosis作為數(shù)據(jù)源接入模塊,并搭建基于HBase的調(diào)度監(jiān)
5、控分布式存儲(chǔ)系統(tǒng)。以鐵路調(diào)度監(jiān)控海量監(jiān)測(cè)數(shù)據(jù)為處理對(duì)象,通過開展一系列拓?fù)鋵?shí)例集群測(cè)試,評(píng)測(cè)初始集成系統(tǒng)的整體計(jì)算性能。實(shí)驗(yàn)結(jié)果表明:流計(jì)算實(shí)時(shí)處理系統(tǒng)能夠在獲得ms級(jí)平均處理延時(shí)的同時(shí)確保數(shù)據(jù)處理的準(zhǔn)確性;當(dāng)發(fā)生磁盤消息堆積時(shí),系統(tǒng)仍能保持較低的平均處理延時(shí);且系統(tǒng)具備一定的負(fù)載均衡能力,可以應(yīng)對(duì)大規(guī)模流計(jì)算拓?fù)淙蝿?wù)。
最后,本文還就進(jìn)一步提升流計(jì)算實(shí)時(shí)處理系統(tǒng)的整體計(jì)算性能,提出了配置運(yùn)行參數(shù)和設(shè)計(jì)并行滑動(dòng)窗口的優(yōu)化方法,
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 基于P-S和報(bào)童收益的鐵道供電監(jiān)控信息流處理研究.pdf
- 基于列式存儲(chǔ)的鐵道供電監(jiān)控信息快速查詢與壓縮處理研究.pdf
- 基于Storm的實(shí)時(shí)信息采集技術(shù)研究.pdf
- 基于Hadoop的鐵道供電監(jiān)控信息流分布式壓縮存儲(chǔ)及容錯(cuò)研究.pdf
- 基于storm的訂單大數(shù)據(jù)實(shí)時(shí)監(jiān)控系統(tǒng)
- 基于Storm的訂單大數(shù)據(jù)實(shí)時(shí)監(jiān)控系統(tǒng).pdf
- 基于Storm的實(shí)時(shí)計(jì)算系統(tǒng)的研究與實(shí)現(xiàn).pdf
- 基于Storm的大數(shù)據(jù)業(yè)務(wù)層實(shí)時(shí)監(jiān)控系統(tǒng)研究.pdf
- 基于Storm的實(shí)時(shí)網(wǎng)絡(luò)數(shù)據(jù)流異常檢測(cè)技術(shù)研究.pdf
- 基于Storm與Hadoop的日志數(shù)據(jù)實(shí)時(shí)處理研究.pdf
- 基于Storm的實(shí)時(shí)地圖匹配算法研究.pdf
- 基于twitter storm的數(shù)據(jù)實(shí)時(shí)分析處理工具研究
- 基于twitter storm的數(shù)據(jù)實(shí)時(shí)分析處理工具研究
- 基于Storm的數(shù)據(jù)流聚類研究.pdf
- 基于實(shí)時(shí)流的網(wǎng)絡(luò)監(jiān)控系統(tǒng)的研究與實(shí)現(xiàn).pdf
- 基于Storm的實(shí)時(shí)交通信息管理系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn).pdf
- 基于實(shí)時(shí)音頻流的信息隱藏方法研究.pdf
- 基于STORM的流數(shù)據(jù)分類挖掘算法的研究.pdf
- 基于Storm的實(shí)時(shí)推薦系統(tǒng)研究與設(shè)計(jì).pdf
- 基于Storm的流數(shù)據(jù)聚類挖掘算法的研究.pdf
評(píng)論
0/150
提交評(píng)論