歷史數(shù)據(jù)管理系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、隨國內(nèi)銀行業(yè)的自由化變革的推進，銀行業(yè)務(wù)產(chǎn)品線不斷拓展，業(yè)務(wù)數(shù)據(jù)量指數(shù)級放大，對數(shù)據(jù)的存儲和挖掘被提到議事日程；隨著數(shù)據(jù)倉庫的建設(shè)，ETL被提到了舉足輕重的位置，應(yīng)運而生的ODS(OPERATION DATA STORE)操作型數(shù)據(jù)存儲系統(tǒng)，提供了數(shù)據(jù)標準化的管理，為提供高質(zhì)量的數(shù)據(jù)打下基礎(chǔ)。
　　 本文主要研究基于ODS操作型數(shù)據(jù)存儲系統(tǒng)的歷史數(shù)據(jù)管理平臺。ODS平臺的最大特點體現(xiàn)在：一是在源系統(tǒng)和目標系統(tǒng)以及數(shù)據(jù)倉庫之間實現(xiàn)

2、了批量數(shù)據(jù)交換，避免多個系統(tǒng)之間批量數(shù)據(jù)交換時的點點溝通，在源系統(tǒng)和目標系統(tǒng)以及數(shù)據(jù)倉庫之間進行隔離：二是將源系統(tǒng)數(shù)據(jù)加工處理時的共性需求，集中于平臺內(nèi)部統(tǒng)一實現(xiàn)，這一共性需求的統(tǒng)一處理，從簡單的數(shù)據(jù)接口轉(zhuǎn)換深入到更復(fù)雜的業(yè)務(wù)邏輯展現(xiàn)，實現(xiàn)了真正意義上的數(shù)據(jù)標準化和模型化。
　　 本文從數(shù)據(jù)倉庫發(fā)展背景和ODS操作型數(shù)據(jù)存儲系統(tǒng)的產(chǎn)生背景入手，論述了歷史數(shù)據(jù)管理平臺在企業(yè)信息化建設(shè)中的定位、目標和總體設(shè)計原則，并集中通過關(guān)鍵技術(shù)

3、模塊設(shè)計與實現(xiàn)進行展開，討論了整個系統(tǒng)的總體設(shè)計。由于歷史數(shù)據(jù)管理平臺的系統(tǒng)特性要求，本文接著對業(yè)務(wù)系統(tǒng)需求的特性及其與歷史數(shù)據(jù)管理平臺的關(guān)系進行了詳細分析，這部分集中分析了對歷史數(shù)據(jù)管理平臺建設(shè)的外部需求。突出了歷史和數(shù)據(jù)平臺在企業(yè)級信息管理中的作用和地位。在本文的最后部分，是歷史數(shù)據(jù)管理平臺各功能模塊的設(shè)計與實現(xiàn)。在設(shè)計中，突出了以作業(yè)自動生成模塊和文件結(jié)構(gòu)管理模塊為代表的自動化處理流程，建立了數(shù)據(jù)分級，標準化存儲的良好開端，實現(xiàn)了