卷煙生產(chǎn)經(jīng)營決策管理系統(tǒng)數(shù)據(jù)采集方案設(shè)計與實現(xiàn).pdf

1、國家煙草專賣局為了適應(yīng)行業(yè)發(fā)展的需要，構(gòu)建了一個基于行業(yè)現(xiàn)有信息網(wǎng)絡(luò)基礎(chǔ)的生產(chǎn)經(jīng)營決策管理系統(tǒng)。數(shù)據(jù)倉庫作為決策管理系統(tǒng)的基礎(chǔ)，是面向主題的、集成的、不可變更的、隨時間不斷變化的數(shù)據(jù)集合。 建立數(shù)據(jù)中心過程中最關(guān)鍵的就是數(shù)據(jù)采集系統(tǒng)的設(shè)計，也即ETL 的設(shè)計與實現(xiàn)。它的設(shè)計直接關(guān)系到?jīng)Q策系統(tǒng)的最終效果?，F(xiàn)有市場上有許多ETL 工具，但通用性強而針對性差，作者在研究了數(shù)據(jù)的轉(zhuǎn)換和清洗算法之后，設(shè)計了一個從各種數(shù)據(jù)源抽取數(shù)據(jù)到數(shù)據(jù)倉

2、庫的ETL工具。 ETL 工具中元數(shù)據(jù)庫的設(shè)計參照了元數(shù)據(jù)管理的CWM 標(biāo)準(zhǔn)，借鑒了元數(shù)據(jù)管理標(biāo)準(zhǔn)化的思想，并根據(jù)實際需求進行設(shè)計，元數(shù)據(jù)信息存放在XML 文件中。在實現(xiàn)時采用了Java 技術(shù)，遵循MVC 設(shè)計模式，把數(shù)據(jù)采集系統(tǒng)分為3 個部分：任務(wù)設(shè)計器、任務(wù)執(zhí)行引擎和管理中心。數(shù)據(jù)采集系統(tǒng)的核心管理單元是任務(wù)，一個任務(wù)完成一次數(shù)據(jù)抽取操作，多個任務(wù)組成一個主題，完成業(yè)務(wù)意義上的一類數(shù)據(jù)抽取過程。數(shù)據(jù)傳輸采用消息傳輸中間件，保證