基于Oracle的實時數(shù)據(jù)倉庫技術研究與應用.pdf

1、隨著信息技術的不斷發(fā)展，海量數(shù)據(jù)的不斷涌現(xiàn)，企業(yè)迫切需要高效、精確、科學的分析數(shù)據(jù)。由于傳統(tǒng)數(shù)據(jù)倉庫的數(shù)據(jù)更新一般是每天，每周或是每個月更新一次，這就意味著它的數(shù)據(jù)不是最新的，然而，對于電子商業(yè)，股票經(jīng)濟，在線通訊以及決策系統(tǒng)等信息，需要及時的將數(shù)據(jù)發(fā)送到?jīng)Q策者手中，他們依據(jù)最新的這些數(shù)據(jù)信息去占領市場，由此出現(xiàn)了實時數(shù)據(jù)倉庫的概念。
　　 目前，在實時數(shù)據(jù)倉庫體系的構(gòu)建過程中，面臨的最大挑戰(zhàn)就是實時數(shù)據(jù)抽取、轉(zhuǎn)換、清洗和加載到

2、數(shù)據(jù)倉庫的工作，即實時ETL的過程。因此本文提出了一種實時數(shù)據(jù)倉庫的裝載方法，該方法將采取復制表結(jié)構(gòu)、設置查詢限制等條件實現(xiàn)在數(shù)據(jù)倉庫中數(shù)據(jù)持續(xù)高效的裝載，并且闡述了如何使用實時數(shù)據(jù)倉庫架構(gòu)以及客戶終端OLTP查詢來實現(xiàn)實時數(shù)據(jù)的整合。
　　 針對實時數(shù)據(jù)倉庫技術的實現(xiàn)，本文做了以下相關工作：首先，對實時數(shù)據(jù)倉庫的研究現(xiàn)狀、應用情況進行分析，得出了實時數(shù)據(jù)倉庫技術研究的必要性。其次，對傳統(tǒng)數(shù)據(jù)倉庫的體系架構(gòu)不能滿足實時性的需求，

3、提出了實時數(shù)據(jù)倉庫的體系架構(gòu)，包括事實監(jiān)控模塊、數(shù)據(jù)轉(zhuǎn)換模塊、數(shù)據(jù)存儲模塊和實時分析模塊。再次，對實時數(shù)據(jù)倉庫的過程中，數(shù)據(jù)的抽取、轉(zhuǎn)換和裝載過程比較困難的情況下，采用立即型數(shù)據(jù)捕獲方法進行數(shù)據(jù)抽??；使用專業(yè)工具和內(nèi)部開發(fā)程序組合，來實施數(shù)據(jù)轉(zhuǎn)換功能；把裝載過程分為了初始轉(zhuǎn)載、周期性的增量裝載和實時的完全更新。最后，把實時數(shù)據(jù)倉庫技術應用在Golf綜合查詢和決策支持系統(tǒng)中，對實時數(shù)據(jù)倉庫架構(gòu)、OLAP查詢進行了調(diào)整，采用了復制表結(jié)構(gòu)、設