多維數(shù)據(jù)倉庫技術在礦井信息化系統(tǒng)中的研究及應用.pdf

1、隨著煤礦企業(yè)規(guī)模的擴大和信息化水平的不斷提高，在經(jīng)營管理過程中產(chǎn)生了海量的業(yè)務數(shù)據(jù)，如何有效地管理和重組數(shù)據(jù)資源，提煉出有價值的信息以供決策使用，成為當前煤炭行業(yè)“大數(shù)據(jù)”發(fā)展過程中面臨的一大難題，而建立基于多維數(shù)據(jù)倉庫技術的礦井信息化系統(tǒng)是解決這一問題的有效途徑。
　　本文針對煤礦企業(yè)生產(chǎn)運營特點，結合礦井數(shù)據(jù)多源、異構的特殊性，對數(shù)據(jù)倉庫架構和ETL（Extract，Transform，Load）算法兩方面進行系統(tǒng)研究，分別提

2、出了適合礦井數(shù)據(jù)特點的改進方法，最后以大屯煤電公司綜合調(diào)度信息管理系統(tǒng)為例，設計實現(xiàn)了礦井多維數(shù)據(jù)倉庫系統(tǒng)。論文主要工作如下：
　　（1）在數(shù)據(jù)倉庫架構方面，分析傳統(tǒng)數(shù)據(jù)倉庫架構中存在的不足，設計了一種基于多數(shù)據(jù)集市的礦井多維數(shù)據(jù)倉庫模型，各數(shù)據(jù)集市之間通過共同維加強聯(lián)系。提出一種利用二次集成簡化開發(fā)，優(yōu)化數(shù)據(jù)結構的數(shù)據(jù)倉庫/數(shù)據(jù)集市體系結構的改進方法。
　　（2）在ETL算法方面，設計基于元數(shù)據(jù)的改良實時ETL過程，提出了

3、一種基于數(shù)據(jù)質(zhì)量控制的實時ETL改進算法，實驗表明：基于系統(tǒng)數(shù)據(jù)日志的實時ETL算法實現(xiàn)了對數(shù)據(jù)倉庫與業(yè)務系統(tǒng)之間數(shù)據(jù)共享零延時的要求；增加了問題數(shù)據(jù)處理模塊及抽樣數(shù)據(jù)質(zhì)量評估模塊的基于數(shù)據(jù)質(zhì)量控制的ETL改進算法大大優(yōu)化了ETL工作流程，提高了進入數(shù)據(jù)倉庫中的數(shù)據(jù)質(zhì)量。
　?。?）將上述研究成果應用在大屯煤電公司綜合調(diào)度信息管理系統(tǒng)中，設計了生產(chǎn)信息記錄、事故安全記錄、煤炭運銷記錄三大主題模塊，在企業(yè)數(shù)據(jù)分析、企業(yè)決策制定的應用