數(shù)據(jù)倉(cāng)庫(kù)實(shí)現(xiàn)圖增量維護(hù)策略研究.pdf

1、數(shù)據(jù)倉(cāng)庫(kù)中的數(shù)據(jù)大多來(lái)源于多個(gè)分散、異構(gòu)及自治的底層業(yè)務(wù)數(shù)據(jù)庫(kù)，其信息以實(shí)視圖的形式存儲(chǔ)。通過(guò)物理上的預(yù)先存儲(chǔ)，加快了查詢響應(yīng)時(shí)間，大大提高了數(shù)據(jù)倉(cāng)庫(kù)的性能。然而，底層數(shù)據(jù)庫(kù)中的數(shù)據(jù)是不斷變化的，為使數(shù)據(jù)倉(cāng)庫(kù)實(shí)視圖能夠同步反映數(shù)據(jù)源的變化，必須對(duì)數(shù)據(jù)倉(cāng)庫(kù)中的相關(guān)數(shù)據(jù)進(jìn)行及時(shí)維護(hù)。 實(shí)視圖的維護(hù)是數(shù)據(jù)倉(cāng)庫(kù)中的關(guān)鍵技術(shù)，隨數(shù)據(jù)源和數(shù)據(jù)量的不斷增加，對(duì)數(shù)據(jù)倉(cāng)庫(kù)實(shí)視圖維護(hù)的效率提出了更高的要求，采用完全更新顯然是不可行的，研究實(shí)視圖的增

2、量維護(hù)策略將具有重要的理論價(jià)值和實(shí)踐意義。 在介紹數(shù)據(jù)倉(cāng)庫(kù)及實(shí)視圖的概念基礎(chǔ)上，對(duì)三層數(shù)據(jù)倉(cāng)庫(kù)增量維護(hù)體系結(jié)構(gòu)進(jìn)行了改進(jìn)，在數(shù)據(jù)倉(cāng)庫(kù)基庫(kù)與數(shù)據(jù)倉(cāng)庫(kù)之間增加組件包裝器，將當(dāng)前數(shù)據(jù)庫(kù)副本轉(zhuǎn)換成數(shù)據(jù)倉(cāng)庫(kù)所需要的有效格式，同時(shí)利用觸發(fā)器技術(shù)獲取底層數(shù)據(jù)庫(kù)系統(tǒng)的增量。 針對(duì)現(xiàn)有實(shí)視圖增量更新算法存在的效率不高或處理不完善等不足，利用清除舊數(shù)據(jù)和保存歷史相結(jié)合的方法對(duì)維表的更新進(jìn)行改進(jìn)，在清除舊數(shù)據(jù)時(shí)充分考慮到了決策的準(zhǔn)確性、即時(shí)性

3、和高效性等多個(gè)因素，并結(jié)合用戶需求獲得最佳平衡點(diǎn)。同時(shí)利用擴(kuò)展技術(shù)元數(shù)據(jù)聚集相關(guān)標(biāo)識(shí)符和當(dāng)前標(biāo)志指示符對(duì)實(shí)視圖增量更新進(jìn)行改進(jìn)，避免了對(duì)事實(shí)表進(jìn)行的不必要的修改，簡(jiǎn)化了更新過(guò)程，提高了增量更新的效率。 現(xiàn)有的聚集函數(shù)增量更新算法只考慮到某些特殊情況，不具有通用性，因此根據(jù)聚集函數(shù)更新的特點(diǎn)將其分為可自維護(hù)聚集函數(shù)和不可自維護(hù)聚集函數(shù)兩類(lèi)，針對(duì)不同情況對(duì)聚集函數(shù)的增量更新進(jìn)行了完善。 為了測(cè)試改進(jìn)算法的功能及效率，在實(shí)驗(yàn)中