

版權說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權,請進行舉報或認領
文檔簡介
1、鐵路供電系統(tǒng)是鐵路運輸?shù)闹匾b備,擔負著為電力機車和動車組、沿途車站、通信、照明、信號燈和閉塞裝置等設備供電的重任,其安全可靠供電直接關系到鐵路運輸?shù)陌踩?,故為保障其安全供電,鐵路部門裝設了鐵路供電監(jiān)控系統(tǒng)。由于鐵路牽引供電系統(tǒng)是一種典型的動態(tài)電網(wǎng)絡,其機車負荷又是大功率的沖擊性負荷,且具有波動幅度大、變化快等特點,加之高速動車組的運行速度快、開行密度大,加劇了鐵路電網(wǎng)電壓、電流等運行參數(shù)的變化,被控端將采集到大批量現(xiàn)場實時數(shù)據(jù)信息上傳
2、至調(diào)度中心,調(diào)度監(jiān)控系統(tǒng)需要對這些信息進行不斷地存取處理,長期運行將產(chǎn)生海量信息。而目前監(jiān)控系統(tǒng)的數(shù)據(jù)存儲平臺大多基于關系數(shù)據(jù)庫,存取容量一般限制在TB級,面對快速增長、動態(tài)、海量的監(jiān)測數(shù)據(jù),其裝載和查詢性能較差,如果直接對這些海量數(shù)據(jù)進行存取操作,系統(tǒng)的響應速度慢、甚至死機,容易使信息延遲,不僅影響系統(tǒng)實時性,嚴重時甚至造成關鍵信息的遲報或漏報,導致報警延遲或消失,直接威脅供電安全,已無法滿足持續(xù)增長的海量數(shù)據(jù)存儲與處理需求。因此,如
3、何快速存儲和處理海量監(jiān)控數(shù)據(jù),是一個需要迫切解決的關鍵問題。
本文針對鐵路供電監(jiān)控系統(tǒng)中海量監(jiān)控信息的存儲與查詢困難的問題,融合Hadoop、Hive和Impala的云計算大數(shù)據(jù)組件,構建鐵路供電調(diào)度監(jiān)控云計算集群,以北京動車段10kV電力遠動監(jiān)控系統(tǒng)為算例,進行了調(diào)度監(jiān)控數(shù)據(jù)的分布式Map壓縮存儲研究、HQL連接查詢優(yōu)化研究和Impala快速查詢研究,實現(xiàn)海量監(jiān)控數(shù)據(jù)的高效壓縮存儲與快速查詢。研究結果表明:1)監(jiān)控數(shù)據(jù)采用分
4、布式Map壓縮后,既可明顯加快壓縮導入速度,又可大幅減小數(shù)據(jù)體量,同時對查詢幾乎無影響,其中Map_Gzip、Map_Deflate、Map_Snappy、Map_LZO格式反而加快了查詢速度,為解決海量監(jiān)控數(shù)據(jù)的存取問題提供了新的解決思路;2)HQL連接查詢的混洗階段采用分布式Map壓縮后查詢耗時明顯減少,其中,分布式Map的Map_LZO及Map_Snappy格式效果最好,在記錄大于2.0×107條時相比混洗階段未壓縮而直接查詢的時
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 圖像信息壓縮技術研究.pdf
- 信息壓縮與傳輸報告
- 大數(shù)據(jù)環(huán)境下農(nóng)業(yè)信息資源的存取研究.pdf
- 基于可壓縮結構化數(shù)據(jù)的信息壓縮理論研究與算法實現(xiàn).pdf
- 利用數(shù)據(jù)庫存取組件存取數(shù)據(jù)庫
- 全息圖信息壓縮的初步研究.pdf
- 多媒體信息壓縮技術研究.pdf
- 基于大數(shù)據(jù)的鐵路供電EMIS系統(tǒng)及其Android應用開發(fā).pdf
- 基于自適應差量的頻譜狀態(tài)信息壓縮方法.pdf
- 三維視頻深度信息壓縮技術研究.pdf
- 基于列式存儲的鐵道供電監(jiān)控信息快速查詢與壓縮處理研究.pdf
- 用于智能卡的人像信息壓縮技術的研究.pdf
- 基于壓縮感知的大數(shù)據(jù)處理方法的研究.pdf
- 大數(shù)據(jù)環(huán)境下基于SNA的輿情監(jiān)控研究.pdf
- 基于Hadoop的鐵道供電監(jiān)控信息流分布式壓縮存儲及容錯研究.pdf
- 基于大數(shù)據(jù)的社交媒體區(qū)域監(jiān)控技術研究.pdf
- 無線傳感器網(wǎng)絡中的信息壓縮與路由技術研究.pdf
- 地理信息壓縮存儲及查詢的設計與實現(xiàn).pdf
- 基于信息壓縮的無線植入式腦機接口中算法及系統(tǒng)研究.pdf
- 大數(shù)據(jù)驅動的鐵路統(tǒng)計綜合信息體系研究及應用.pdf
評論
0/150
提交評論