泛數據收集應用服務平臺的設計與實現.pdf

1、近幾年來隨著國內外市場信息化發(fā)展日趨完善，數據在類型、格式、地域等方面也呈多樣化發(fā)展趨勢。簡單地說，將分布在不同地域空間的各類數據或數據格式統稱為泛數據。如何將地源遼闊，流動性強，格式多樣的泛數據收集于統一的平臺是企業(yè)信息化首要解決的問題。為此我們提出了使用網絡方面的最新通路技術，將有線，無線，在線，離線，條形碼，語音數據收集等多渠道泛數據收集方式統統聚合在一個統一的平臺上的設想并進入具體實施。 本文是以多渠道泛數據收集應用服務

2、平臺為案例，闡述了泛數據收集應用服務平臺的概念及其體系架構。在體系架構的設計上采用了模塊化的設計方法，本系統的主要模塊包括：數據接收端、數據處理層，數據收集引擎、元數據和數據輸出五個模塊。每個模塊之間的依賴關系都是建立在接口之上的，也就是說每個模塊的具體實現的變化是不會影響到其他模塊的。在數據接收端模塊，系統需要通過不同協議接收各種各樣的異構數據，這就需要有不同的數據接收實現，然而他們對外部都具有統一的接口，外部系統并不需要里面的實現。

3、同樣在數據收集引擎模塊，可以簡單地將數據的鏈式處理方式更改為工作流處理方式。本系統作為一個平臺系統，還包括了后臺管理程序，系統管理員可以進入后臺管理程序管理數據收集流程、元數據，查看日志，管理備份數據，等等。系統管理程序是一個B/S結構的應用程序，是基于MVC模式。除了系統平臺之外，我們還設計了一系列接口，將系統封裝成了一個嵌入式的庫，這樣可以方便將本系統集成到已有的系統中。本系統的實現是基于J2EE平臺的，采用了大量的開源框架，例如：