ETL在期貨CRM數(shù)據(jù)中心中的應(yīng)用研究.pdf

1、近幾年隨著期貨行業(yè)的不斷發(fā)展,期貨業(yè)對IT技術(shù)的依賴程度越來越高,柜臺交易系統(tǒng)、清算系統(tǒng)、資產(chǎn)管理系統(tǒng)、辦公自動化系統(tǒng)、財務(wù)系統(tǒng)都相繼建成,但目前應(yīng)用仍以業(yè)務(wù)運(yùn)行為主,各個系統(tǒng)間信息缺乏有效的共享手段,形成了大量的“信息孤島”,缺乏強(qiáng)大的業(yè)務(wù)支持、管理控制、業(yè)務(wù)分析和決策支持功能。期貨公司為了謀求更大的發(fā)展,都在積極變革思維,從外部的擴(kuò)張轉(zhuǎn)向到內(nèi)部的管理,從以“業(yè)務(wù)為導(dǎo)向”轉(zhuǎn)向到以“客戶為中心”,從“傭金價格競爭”轉(zhuǎn)向到“服務(wù)質(zhì)量競爭”

2、,期貨公司要在激烈的市場競爭中脫穎而出,必須重視公司的核心價值。對于期貨公司來說,客戶是真正的價值所在,客戶關(guān)系管理(CRM)作為一種提升客戶滿意度、提高客戶忠誠度、深層次開發(fā)客戶價值的有效應(yīng)用受到國內(nèi)期貨公司越來越多的重視。建設(shè)以數(shù)據(jù)中心為基礎(chǔ)的CRM系統(tǒng)成為當(dāng)務(wù)之急。
　　 對于CRM系統(tǒng)而言,最重要的是全面豐富準(zhǔn)確的客戶數(shù)據(jù),為了滿足CRM的各種應(yīng)用,建立統(tǒng)一的客戶視圖,建設(shè)分析型企業(yè)級數(shù)據(jù)中心是基礎(chǔ)。在數(shù)據(jù)中心建設(shè)過程中

3、ETL(Extract、Transform and Load,數(shù)據(jù)抽取、轉(zhuǎn)換和加載)和數(shù)據(jù)庫是最關(guān)鍵的兩個環(huán)節(jié),利用ETL將異構(gòu)數(shù)據(jù)源中的業(yè)務(wù)數(shù)據(jù)經(jīng)過抽取、清洗和轉(zhuǎn)換、加載到數(shù)據(jù)中心,為CRM的應(yīng)用提供高質(zhì)量的數(shù)據(jù)。
　　 本文以期貨CRM項目為依托,詳細(xì)闡述了期貨CRM數(shù)據(jù)中心規(guī)劃與設(shè)計,ORACLERAC數(shù)據(jù)庫規(guī)劃,ETL設(shè)計與應(yīng)用,對ETL的設(shè)計與應(yīng)用研究是本文研究的重點(diǎn)。本文主要工作成果如下:
　　 1)ETL相

4、關(guān)理論的研究,包括數(shù)據(jù)倉庫、ODS、ETL技術(shù)等。
　　 研究了構(gòu)建數(shù)據(jù)中心相關(guān)的數(shù)據(jù)倉庫、ODS和ETL技術(shù),主要包括數(shù)據(jù)倉庫體系結(jié)構(gòu),ODS體系結(jié)構(gòu),ETL中的數(shù)據(jù)抽取、轉(zhuǎn)換、加載、元數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量保證和實時ETL等相關(guān)技術(shù)。
　　 2)期貨CRM系統(tǒng)數(shù)據(jù)中心規(guī)劃與設(shè)計。
　　 根據(jù)期貨CRM的系統(tǒng)需求,規(guī)劃和設(shè)計了數(shù)據(jù)中心,對ETL的采集流程、數(shù)據(jù)抽取模式、數(shù)據(jù)清洗轉(zhuǎn)換方式和并發(fā)處理方式進(jìn)行了規(guī)劃,對O

5、RACLERAC數(shù)據(jù)庫系統(tǒng)、存儲系統(tǒng)進(jìn)行了規(guī)劃和設(shè)計。
　　 3)ETL在期貨數(shù)據(jù)中心中的應(yīng)用。
　　 根據(jù)期貨數(shù)據(jù)中心的需求和特點(diǎn)以及ETL的相關(guān)技術(shù),本文設(shè)計了一個具有并發(fā)和分布式處理能力、支持多種數(shù)據(jù)源、支持多種數(shù)據(jù)抽取方式和轉(zhuǎn)換方式符合期貨數(shù)據(jù)中心建設(shè)要求的ETL過程,并將該ETL過程應(yīng)用到期貨CRM數(shù)據(jù)中心,該ETL具有較好的擴(kuò)展性,在支持多種異構(gòu)數(shù)據(jù)源、并行和負(fù)載均衡、異常處理和質(zhì)量保證等方面都具有一定的創(chuàng)新