基于云平臺電廠煙氣監(jiān)測數(shù)據(jù)處理技術的研究.pdf

1、火電廠是燃煤大戶，也是煙氣污染物的主要排放源之一。隨著國家對環(huán)保的日益重視，環(huán)保部門對于火電廠的煙氣監(jiān)測一直十分嚴格，而有些電廠為了達到排放要求，數(shù)據(jù)造假的現(xiàn)象也時有發(fā)生。因此就要求我們對煙氣的排放進行實時監(jiān)控。
　　本文設計了基于云平臺的電廠煙氣監(jiān)測系統(tǒng)的基本結構，分析了各個部分在整個監(jiān)測系統(tǒng)中的功能，明確了系統(tǒng)開發(fā)的注意事項。
　　在數(shù)據(jù)采集傳輸功能模塊的部分，我們利用基于OPC的數(shù)據(jù)傳輸標準和基于Socket的數(shù)據(jù)傳輸

2、技術進行數(shù)據(jù)的發(fā)送和接收讀取。
　　研究了云計算平臺—Hadoop，其在工業(yè)中有最廣泛的應用，它既是一個分布式文件系統(tǒng)又是一個用來并行計算的框架，Hadoop主要應用于海量數(shù)據(jù)處理、數(shù)據(jù)挖掘和日志分析領域。Hadoop包含兩個主要組件HDFS—分布式文件系統(tǒng)以及MapReduce—并行計算的編程模型，分別說明了他們的工作機制。
　　在存儲階段主要針對如何存儲海量煙感數(shù)據(jù)進行了詳細的分析，首先通過列舉煙感數(shù)據(jù)的特點，并給出了合

3、理的存儲結構。說明了基于HDFS的HBase的存儲特點及數(shù)據(jù)使用方法。然后進行了系統(tǒng)設計及功能說明，給出了HBase數(shù)據(jù)模型，并設計了存儲表結構以及如何從HBase轉存成Oracle數(shù)據(jù)庫數(shù)據(jù)給出了概述說明及API方法
　　從存儲調度作業(yè)角度，詳細敘述了基于MapReduce的數(shù)據(jù)存儲及調度方案。在預處理作業(yè)中設計了基于HBase的預處理機制，在分析計算作業(yè)中對表的具體實施進行了分析及詳細的設計和機制闡述。在數(shù)據(jù)的預處理和簡化中運