生產(chǎn)過(guò)程數(shù)據(jù)倉(cāng)庫(kù)ETL模塊的研究與開(kāi)發(fā).pdf

1、實(shí)時(shí)/歷史數(shù)據(jù)庫(kù)為電力企業(yè)建立了海量的生產(chǎn)過(guò)程數(shù)據(jù)資源平臺(tái),挖掘和應(yīng)用蘊(yùn)含在這些數(shù)據(jù)中的豐富信息和規(guī)律具有重要的研究意義和應(yīng)用價(jià)值。采用數(shù)據(jù)倉(cāng)庫(kù)技術(shù)組織這些數(shù)據(jù),進(jìn)行數(shù)據(jù)挖掘是最有效的分析方法。而在數(shù)據(jù)倉(cāng)庫(kù)建立過(guò)程中,數(shù)據(jù)的抽取、轉(zhuǎn)換和加載(ETL)模塊是重要的基礎(chǔ),在整個(gè)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)過(guò)程中占據(jù)約80％的工作量。目前,支持?jǐn)?shù)據(jù)倉(cāng)庫(kù)的大型關(guān)系型數(shù)據(jù)庫(kù)均有相應(yīng)的ETL模塊,但它們還不支持對(duì)實(shí)時(shí)/歷史數(shù)據(jù)庫(kù)中的數(shù)據(jù)的處理；另外,生產(chǎn)過(guò)程數(shù)據(jù)有

2、著自身特點(diǎn),處理方法不同于對(duì)普通數(shù)據(jù)的處理方法。因此研究基于生產(chǎn)過(guò)程的ETL模塊的開(kāi)發(fā)是非常有必要的。
　　 本文首先介紹了數(shù)據(jù)倉(cāng)庫(kù)的概念和特點(diǎn),以及ETL模塊的主要功能。接著針對(duì)基于生產(chǎn)過(guò)程數(shù)據(jù)的特點(diǎn),研究并給出了生產(chǎn)過(guò)程歷史數(shù)據(jù)的清洗、轉(zhuǎn)換、抽取的關(guān)鍵算法。在此基礎(chǔ)上,設(shè)計(jì)并開(kāi)發(fā)了面向?qū)崟r(shí)/歷史數(shù)據(jù)庫(kù)的ETL應(yīng)用功能軟件模塊。最后,將本文開(kāi)發(fā)的ETL模塊應(yīng)用于某600MW燃煤機(jī)組的運(yùn)行工況分析數(shù)據(jù)倉(cāng)庫(kù)的建立中,并展示出部分結(jié)