一種可適應(yīng)多變需求的數(shù)據(jù)處理平臺設(shè)計與應(yīng)用.pdf

1、隨著計算機網(wǎng)絡(luò)的發(fā)展與互聯(lián)網(wǎng)的深入應(yīng)用，企業(yè)面臨數(shù)據(jù)爆炸式增長，如何從這些海量、異構(gòu)、多樣、動態(tài)的數(shù)據(jù)中準(zhǔn)確、高效、低成本地挖掘有價值的信息，幫助企業(yè)和機構(gòu)做出決策，已成為許多企業(yè)下一個階段信息化系統(tǒng)建設(shè)的重要目標(biāo)。傳統(tǒng)的在開發(fā)階段必須確定相應(yīng)功能的應(yīng)用開發(fā)模式，很難適應(yīng)基礎(chǔ)數(shù)據(jù)快速增長、應(yīng)用需求多變的使用環(huán)境，很容易導(dǎo)致系統(tǒng)開發(fā)周期長、使用壽命短的局面，造成巨大人力、物力浪費。研究可適應(yīng)多變需求的應(yīng)用系統(tǒng)，具有實用價值。
　　本

2、文在深入研究可適應(yīng)多變需求應(yīng)用系統(tǒng)構(gòu)建相關(guān)理論和技術(shù)的基礎(chǔ)上，提出了一種處理方案:基于通用數(shù)據(jù)處理平臺提供動態(tài)定制數(shù)據(jù)處理（統(tǒng)計、數(shù)據(jù)挖掘）流程的功能，而（高層）應(yīng)用系統(tǒng)通過一個流程處理執(zhí)行引擎執(zhí)行可變流程或者組合的流程方式，以增強應(yīng)用系統(tǒng)適應(yīng)數(shù)據(jù)和多變需求的能力。論文主要貢獻(xiàn)和工作如下:
　　1.研究了可跨平臺交換統(tǒng)計和挖掘模型的通用語言PMML，并在研究了部分開源PMML執(zhí)行引擎的基礎(chǔ)上，設(shè)計并實現(xiàn)了一套PMML執(zhí)行引擎。

3、r>　　2.設(shè)計并實現(xiàn)了一套可支持?jǐn)?shù)據(jù)預(yù)處理、數(shù)據(jù)集成和部分?jǐn)?shù)據(jù)挖掘的可視化數(shù)據(jù)處理流程設(shè)計平臺。該平臺以PMML語言作為數(shù)據(jù)處理流程的基本描述語言，以自主設(shè)計的PMML執(zhí)行引擎為流程定制模塊的核心，實現(xiàn)了允許以直觀的、交互式繪圖方式，進(jìn)行可視化流程設(shè)計、流程執(zhí)行以及可視化執(zhí)行結(jié)果展示等功能。
　　該平臺主要功能現(xiàn)已基本完成，可正常運行。將平臺應(yīng)用于某商業(yè)銀行海量客戶交易金融數(shù)據(jù)信用分析，驗證了平臺的一些功能，通過定制數(shù)據(jù)處理流程