一種可適應(yīng)多變需求的數(shù)據(jù)處理平臺(tái)設(shè)計(jì)與應(yīng)用.pdf

1、隨著計(jì)算機(jī)網(wǎng)絡(luò)的發(fā)展與互聯(lián)網(wǎng)的深入應(yīng)用，企業(yè)面臨數(shù)據(jù)爆炸式增長(zhǎng)，如何從這些海量、異構(gòu)、多樣、動(dòng)態(tài)的數(shù)據(jù)中準(zhǔn)確、高效、低成本地挖掘有價(jià)值的信息，幫助企業(yè)和機(jī)構(gòu)做出決策，已成為許多企業(yè)下一個(gè)階段信息化系統(tǒng)建設(shè)的重要目標(biāo)。傳統(tǒng)的在開(kāi)發(fā)階段必須確定相應(yīng)功能的應(yīng)用開(kāi)發(fā)模式，很難適應(yīng)基礎(chǔ)數(shù)據(jù)快速增長(zhǎng)、應(yīng)用需求多變的使用環(huán)境，很容易導(dǎo)致系統(tǒng)開(kāi)發(fā)周期長(zhǎng)、使用壽命短的局面，造成巨大人力、物力浪費(fèi)。研究可適應(yīng)多變需求的應(yīng)用系統(tǒng)，具有實(shí)用價(jià)值。
　　本

2、文在深入研究可適應(yīng)多變需求應(yīng)用系統(tǒng)構(gòu)建相關(guān)理論和技術(shù)的基礎(chǔ)上，提出了一種處理方案:基于通用數(shù)據(jù)處理平臺(tái)提供動(dòng)態(tài)定制數(shù)據(jù)處理（統(tǒng)計(jì)、數(shù)據(jù)挖掘）流程的功能，而（高層）應(yīng)用系統(tǒng)通過(guò)一個(gè)流程處理執(zhí)行引擎執(zhí)行可變流程或者組合的流程方式，以增強(qiáng)應(yīng)用系統(tǒng)適應(yīng)數(shù)據(jù)和多變需求的能力。論文主要貢獻(xiàn)和工作如下:
　　1.研究了可跨平臺(tái)交換統(tǒng)計(jì)和挖掘模型的通用語(yǔ)言PMML，并在研究了部分開(kāi)源PMML執(zhí)行引擎的基礎(chǔ)上，設(shè)計(jì)并實(shí)現(xiàn)了一套PMML執(zhí)行引擎。

3、r>　　2.設(shè)計(jì)并實(shí)現(xiàn)了一套可支持?jǐn)?shù)據(jù)預(yù)處理、數(shù)據(jù)集成和部分?jǐn)?shù)據(jù)挖掘的可視化數(shù)據(jù)處理流程設(shè)計(jì)平臺(tái)。該平臺(tái)以PMML語(yǔ)言作為數(shù)據(jù)處理流程的基本描述語(yǔ)言，以自主設(shè)計(jì)的PMML執(zhí)行引擎為流程定制模塊的核心，實(shí)現(xiàn)了允許以直觀的、交互式繪圖方式，進(jìn)行可視化流程設(shè)計(jì)、流程執(zhí)行以及可視化執(zhí)行結(jié)果展示等功能。
　　該平臺(tái)主要功能現(xiàn)已基本完成，可正常運(yùn)行。將平臺(tái)應(yīng)用于某商業(yè)銀行海量客戶交易金融數(shù)據(jù)信用分析，驗(yàn)證了平臺(tái)的一些功能，通過(guò)定制數(shù)據(jù)處理流程