數據倉庫中實時抽取機制的研究與實現.pdf

1、為了提高決策科學化水平，電信企業(yè)也紛紛構建了以數據倉庫系統為核心的經營分析系統，為企業(yè)的決策提供管理信息。然而，經營分析系統不能實時地根據變化數據產生信息，進而支持企業(yè)日常管理所需的結構化決策行為，無法將恰當的信息在恰當的時間傳遞給恰當的人，因此，當信息越來越多時，決策者利用信息卻變得越來越困難。主動實時數據倉庫技術可以支持這個問題的解決，變化數據捕獲是其中的關鍵技術。 本文利用數據庫在線日志技術，給出了一個基于消息隊列的變化數

2、據捕獲框架，能夠支持實時從生產系統捕獲變化數據，按照預定格式進行轉換后經過消息中間件傳送到目的端，由目的端應用代理對消息進行接收和處理。并在此基礎上設計了一個事件處理模型，該模型根據變化的數據產生事件，并主動驅動后續(xù)的ETL過程，實時地生成管理信息，結合發(fā)布/訂閱機制，可以很好地解決信息實時生成、主動推送問題，進而為自動化日常結構決策行為提供支持。整個框架處理過程都是由事件驅動的，形成一個實時決策分析的閉環(huán)。整個過程是一個動態(tài)的發(fā)現處理