電信企業(yè)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)

1、數(shù)據(jù)庫(kù)《郵電規(guī)劃》2003年第5期38電信企業(yè)數(shù)據(jù)倉(cāng)庫(kù)建設(shè)貴州省移動(dòng)通信公司茍茹辛1電信企業(yè)信息化現(xiàn)狀從上世紀(jì)八十年代開(kāi)始，我國(guó)電信企業(yè)開(kāi)始進(jìn)行大規(guī)模的信息化建設(shè)，在近二十年的時(shí)間中，電信企業(yè)已全面實(shí)現(xiàn)了生產(chǎn)及服務(wù)過(guò)程信息化。隨著業(yè)務(wù)不斷趨于多樣化，各電信企業(yè)都針對(duì)不同業(yè)務(wù)建立了多個(gè)生產(chǎn)管理系統(tǒng)，如中國(guó)電信建設(shè)的生產(chǎn)系統(tǒng)就包括了進(jìn)行業(yè)務(wù)受理、配線配號(hào)、工單管理的“97”系統(tǒng)；進(jìn)行計(jì)費(fèi)、帳務(wù)及欠費(fèi)處理的計(jì)費(fèi)系統(tǒng)；114、112、180、1

2、89等專(zhuān)業(yè)系統(tǒng)；201、IC等卡類(lèi)管理系統(tǒng)；基于互聯(lián)網(wǎng)信息管理的數(shù)據(jù)業(yè)務(wù)管理系統(tǒng)以及交換、傳輸、網(wǎng)管系統(tǒng)等。中國(guó)移動(dòng)也建設(shè)了綜合業(yè)務(wù)支撐（BOSS）系統(tǒng)；用于夢(mèng)網(wǎng)短信接入的短信網(wǎng)關(guān)、彩信網(wǎng)關(guān)、GPRS網(wǎng)關(guān)等各專(zhuān)業(yè)管理系統(tǒng)。目前，電信企業(yè)建設(shè)的項(xiàng)目仍然以生產(chǎn)支撐系統(tǒng)為主。通過(guò)這些支撐系統(tǒng)的建設(shè)，規(guī)范了電信企業(yè)內(nèi)部管理流程，大大提高了電信企業(yè)的工作效率，增強(qiáng)了業(yè)務(wù)水平，提高了企業(yè)的競(jìng)爭(zhēng)力。隨著市場(chǎng)競(jìng)爭(zhēng)的不斷加劇，對(duì)客戶資源的爭(zhēng)奪也進(jìn)入了白熱

3、化的階段，如何發(fā)展新用戶，擴(kuò)大自己的用戶群；如何設(shè)計(jì)出更適合用戶需要的業(yè)務(wù)，將用戶綁定在自己的網(wǎng)絡(luò)上；如何合理地設(shè)定資費(fèi)在用戶可以接受的水平；一個(gè)個(gè)問(wèn)題擺在了電信運(yùn)營(yíng)商的面前。在激烈的市場(chǎng)競(jìng)爭(zhēng)面前，要想科學(xué)的決策，離不開(kāi)數(shù)據(jù)的支持。電信運(yùn)營(yíng)商們?cè)诮⒏黜?xiàng)系統(tǒng)的過(guò)程中，也積累了大量的資料數(shù)據(jù)，如用戶的通話記錄，短信發(fā)送記錄，用戶上網(wǎng)記錄，用戶資料變更記錄，用戶投訴記錄，網(wǎng)絡(luò)運(yùn)行記錄等。通過(guò)對(duì)這些數(shù)據(jù)進(jìn)行分析，可以掌握企業(yè)的運(yùn)營(yíng)狀況，為企業(yè)

4、科學(xué)、準(zhǔn)確的決策提供依據(jù)。但在使用這些數(shù)據(jù)的過(guò)程中，也存在以下幾個(gè)問(wèn)題：⑴數(shù)據(jù)量大、數(shù)據(jù)來(lái)源廣以用戶數(shù)近300萬(wàn)的某電信運(yùn)營(yíng)商為例，每天產(chǎn)生的僅通話話單數(shù)就達(dá)數(shù)千萬(wàn)條；這還不包括其它生產(chǎn)環(huán)節(jié)如客服、網(wǎng)管等所產(chǎn)生的運(yùn)營(yíng)數(shù)據(jù)；而經(jīng)營(yíng)管理所牽涉的數(shù)據(jù)除此以外還包括了內(nèi)部管理的人力、財(cái)務(wù)、以及與企業(yè)相關(guān)的外部環(huán)境數(shù)據(jù)。⑵各業(yè)務(wù)部門(mén)對(duì)數(shù)據(jù)的理解存在偏差，定義不統(tǒng)一，導(dǎo)致數(shù)據(jù)可信度無(wú)法保證。對(duì)單個(gè)業(yè)務(wù)部門(mén)來(lái)說(shuō)可能是合法的數(shù)據(jù)，但由于缺乏信息的集成和

5、整合，導(dǎo)致整個(gè)企業(yè)對(duì)數(shù)據(jù)的含義、數(shù)值及使用方式產(chǎn)生歧義。⑶每個(gè)系統(tǒng)都有獨(dú)立的報(bào)表系統(tǒng)，隨著需求的變化和統(tǒng)計(jì)項(xiàng)目的變化，使得報(bào)表的修改相對(duì)比較困難；尤其目前很多在用系統(tǒng)的報(bào)表都固化在程序中，給今后的修改帶來(lái)諸多不便。⑷對(duì)于一些需要跨平臺(tái)才能進(jìn)行的分析，由于平臺(tái)不一致，應(yīng)用系統(tǒng)之間數(shù)據(jù)定義也不一致，又沒(méi)有實(shí)現(xiàn)數(shù)據(jù)共享，很難進(jìn)行關(guān)聯(lián)分析；并且，一個(gè)企業(yè)內(nèi)部，不同系統(tǒng)平臺(tái)之間的數(shù)據(jù)存在較大的冗余，增加了維護(hù)工作量，并可能造成系統(tǒng)資源的浪費(fèi)。⑸在

6、生產(chǎn)系統(tǒng)上進(jìn)行統(tǒng)計(jì)分析會(huì)影響到正常生產(chǎn)系統(tǒng)運(yùn)轉(zhuǎn)。由于生產(chǎn)系統(tǒng)的時(shí)效性要求較高，需要大量的系統(tǒng)資源進(jìn)行保障，為確保生產(chǎn)系統(tǒng)安全穩(wěn)定運(yùn)行，有必要將統(tǒng)計(jì)、分析等對(duì)時(shí)效性要求相對(duì)較低的決策支持系統(tǒng)從生產(chǎn)系統(tǒng)分離。數(shù)據(jù)庫(kù)《郵電規(guī)劃》2003年第5期40數(shù)據(jù)總稱(chēng)。這些數(shù)據(jù)是構(gòu)建數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)的基礎(chǔ)是整個(gè)系統(tǒng)的數(shù)據(jù)源泉。數(shù)據(jù)的存儲(chǔ)與管理：數(shù)據(jù)倉(cāng)庫(kù)的存儲(chǔ)主要由元數(shù)據(jù)的存儲(chǔ)及數(shù)據(jù)的存儲(chǔ)兩部分組成。元數(shù)據(jù)是關(guān)于數(shù)據(jù)的數(shù)據(jù)，其內(nèi)容主要包括數(shù)據(jù)倉(cāng)庫(kù)的數(shù)據(jù)字典、數(shù)

7、據(jù)的定義、數(shù)據(jù)的抽取規(guī)則、數(shù)據(jù)的轉(zhuǎn)換規(guī)則、數(shù)據(jù)加載頻率等信息。各操作數(shù)據(jù)庫(kù)中的數(shù)據(jù)按照元數(shù)據(jù)庫(kù)中定義的規(guī)則，經(jīng)過(guò)抽取、清理、轉(zhuǎn)換、集成，按照主題重新組織，依照相應(yīng)的存儲(chǔ)結(jié)構(gòu)進(jìn)行存儲(chǔ)。也可以面向應(yīng)用建立一些數(shù)據(jù)集市，數(shù)據(jù)集市可以看作是數(shù)據(jù)倉(cāng)庫(kù)的一個(gè)子集，它含有較少的主題域且歷史時(shí)間更短數(shù)據(jù)量更少，一般只能為某個(gè)局部范圍內(nèi)的管理人員服務(wù)，因此也稱(chēng)之為部門(mén)級(jí)數(shù)據(jù)倉(cāng)庫(kù)。數(shù)據(jù)的訪問(wèn)：由OLAP(聯(lián)機(jī)分析處理)、數(shù)據(jù)挖掘、統(tǒng)計(jì)報(bào)表、即席查詢等幾部分

8、組成。例如OLAP：針對(duì)特定的分析主題，設(shè)計(jì)多種可能的觀察形式，設(shè)計(jì)相應(yīng)的分析主題結(jié)構(gòu)（即進(jìn)行事實(shí)表和維表的設(shè)計(jì)），使管理決策人員在多維數(shù)據(jù)模型的基礎(chǔ)上進(jìn)行快速、穩(wěn)定和交互性的訪問(wèn)，并進(jìn)行各種復(fù)雜的分析和預(yù)測(cè)工作。按照存儲(chǔ)方式來(lái)分，OLAP可以分成MOLAP以及ROLAP等方式MOLAP(MultiDimensionOLAP)將OLAP分析所需的數(shù)據(jù)存放在多維數(shù)據(jù)庫(kù)中。分析主題的數(shù)據(jù)可以形成一個(gè)或多個(gè)多維立方體。ROLAP(Relati

9、onalOLAP)將OLAP分析所需的數(shù)據(jù)存放在關(guān)系型數(shù)據(jù)庫(kù)中。分析主題的數(shù)據(jù)以“事實(shí)表維表”的星型模式組織。3.23.2數(shù)據(jù)倉(cāng)庫(kù)環(huán)境建立的過(guò)程數(shù)據(jù)倉(cāng)庫(kù)的開(kāi)發(fā)生命周期不同于操作型數(shù)據(jù)庫(kù)系統(tǒng)的開(kāi)發(fā)生命周期，傳統(tǒng)的系統(tǒng)開(kāi)發(fā)生命周期（SDLC）是由需求驅(qū)動(dòng)的，首先必須理解需求，在進(jìn)行設(shè)計(jì)和開(kāi)發(fā)；而數(shù)據(jù)倉(cāng)庫(kù)的開(kāi)發(fā)遵循CLDS也就是“螺旋式”開(kāi)發(fā)方法，即由數(shù)據(jù)開(kāi)始，獲取數(shù)據(jù)后，將數(shù)據(jù)進(jìn)行集成并檢查數(shù)據(jù)的準(zhǔn)確性，針對(duì)數(shù)據(jù)進(jìn)行編程，但得到最后結(jié)果后，

10、系統(tǒng)的需求才得到理解。因此數(shù)據(jù)倉(cāng)庫(kù)環(huán)境是按照反復(fù)開(kāi)發(fā)方式建立起來(lái)，即首先建立系統(tǒng)的一小部分，然后再建一部分，一直按相同的路徑反復(fù)進(jìn)行開(kāi)發(fā)，以“總體規(guī)劃、分步實(shí)施、步步見(jiàn)效”為原則。一般來(lái)說(shuō)，建立數(shù)據(jù)倉(cāng)庫(kù)遵循以下四個(gè)步驟：(1)充分了解企業(yè)決策層的需求；明確企業(yè)關(guān)心的主題域，并按照優(yōu)先級(jí)進(jìn)行劃分；(2)按數(shù)據(jù)倉(cāng)庫(kù)方法設(shè)計(jì)數(shù)據(jù)倉(cāng)庫(kù)結(jié)構(gòu)；(3)實(shí)現(xiàn)業(yè)務(wù)操作系統(tǒng)及外部數(shù)據(jù)源的數(shù)據(jù)向數(shù)據(jù)倉(cāng)庫(kù)的遷移（ETL）；(4)面向應(yīng)用建立數(shù)據(jù)集市，滿足企業(yè)決

11、策需求；(5)通過(guò)信息展現(xiàn)工具以可視化手段提供給企業(yè)內(nèi)各級(jí)信息客戶使用。數(shù)據(jù)倉(cāng)庫(kù)的開(kāi)發(fā)是一個(gè)高風(fēng)險(xiǎn)的項(xiàng)目，在建設(shè)過(guò)程中，可考慮以數(shù)據(jù)倉(cāng)庫(kù)示范項(xiàng)目的形式展開(kāi)，通過(guò)面向一兩個(gè)關(guān)鍵業(yè)務(wù)的開(kāi)發(fā)，以保證建設(shè)的重點(diǎn)突出和范圍適中以及成功率。一旦成功地建設(shè)了示范項(xiàng)目，將增加技術(shù)人員和業(yè)務(wù)人員的信心，為業(yè)務(wù)問(wèn)題和技術(shù)問(wèn)題之間達(dá)到平衡摸索一套經(jīng)驗(yàn)，這樣有助于整個(gè)項(xiàng)目在一個(gè)可控制的狀態(tài)下實(shí)施。同時(shí)示范項(xiàng)目也是數(shù)據(jù)倉(cāng)庫(kù)進(jìn)一步開(kāi)發(fā)的組成部分，通過(guò)類(lèi)似于示范項(xiàng)目