基于云平臺電廠煙氣監(jiān)測數(shù)據(jù)處理技術(shù)的研究.pdf

1、火電廠是燃煤大戶，也是煙氣污染物的主要排放源之一。隨著國家對環(huán)保的日益重視，環(huán)保部門對于火電廠的煙氣監(jiān)測一直十分嚴(yán)格，而有些電廠為了達(dá)到排放要求，數(shù)據(jù)造假的現(xiàn)象也時(shí)有發(fā)生。因此就要求我們對煙氣的排放進(jìn)行實(shí)時(shí)監(jiān)控。
　　本文設(shè)計(jì)了基于云平臺的電廠煙氣監(jiān)測系統(tǒng)的基本結(jié)構(gòu)，分析了各個(gè)部分在整個(gè)監(jiān)測系統(tǒng)中的功能，明確了系統(tǒng)開發(fā)的注意事項(xiàng)。
　　在數(shù)據(jù)采集傳輸功能模塊的部分，我們利用基于OPC的數(shù)據(jù)傳輸標(biāo)準(zhǔn)和基于Socket的數(shù)據(jù)傳輸

2、技術(shù)進(jìn)行數(shù)據(jù)的發(fā)送和接收讀取。
　　研究了云計(jì)算平臺—Hadoop，其在工業(yè)中有最廣泛的應(yīng)用，它既是一個(gè)分布式文件系統(tǒng)又是一個(gè)用來并行計(jì)算的框架，Hadoop主要應(yīng)用于海量數(shù)據(jù)處理、數(shù)據(jù)挖掘和日志分析領(lǐng)域。Hadoop包含兩個(gè)主要組件HDFS—分布式文件系統(tǒng)以及MapReduce—并行計(jì)算的編程模型，分別說明了他們的工作機(jī)制。
　　在存儲階段主要針對如何存儲海量煙感數(shù)據(jù)進(jìn)行了詳細(xì)的分析，首先通過列舉煙感數(shù)據(jù)的特點(diǎn)，并給出了合

3、理的存儲結(jié)構(gòu)。說明了基于HDFS的HBase的存儲特點(diǎn)及數(shù)據(jù)使用方法。然后進(jìn)行了系統(tǒng)設(shè)計(jì)及功能說明，給出了HBase數(shù)據(jù)模型，并設(shè)計(jì)了存儲表結(jié)構(gòu)以及如何從HBase轉(zhuǎn)存成Oracle數(shù)據(jù)庫數(shù)據(jù)給出了概述說明及API方法
　　從存儲調(diào)度作業(yè)角度，詳細(xì)敘述了基于MapReduce的數(shù)據(jù)存儲及調(diào)度方案。在預(yù)處理作業(yè)中設(shè)計(jì)了基于HBase的預(yù)處理機(jī)制，在分析計(jì)算作業(yè)中對表的具體實(shí)施進(jìn)行了分析及詳細(xì)的設(shè)計(jì)和機(jī)制闡述。在數(shù)據(jù)的預(yù)處理和簡化中運(yùn)