一種面向海量數(shù)據(jù)綜合評(píng)價(jià)的樹狀數(shù)據(jù)結(jié)構(gòu)的設(shè)計(jì)與研究.pdf

1、隨著當(dāng)前計(jì)算機(jī)技術(shù)、網(wǎng)絡(luò)、多媒體技術(shù)、通訊等技術(shù)的飛速發(fā)展，各類日常生活中充斥的大量數(shù)字資源遍布的專門業(yè)務(wù)系統(tǒng)，那么在如今數(shù)字化日益普及的今天，數(shù)據(jù)挖掘顯得尤為重要，要利用計(jì)算機(jī)在這些大量的數(shù)據(jù)中進(jìn)行有針對(duì)性的挖掘。譬如政府管理部門、大型企事業(yè)單位很多時(shí)候不需要也不可能去查閱全部的數(shù)據(jù)，而是需要從宏觀的層面掌握這些數(shù)據(jù)所反映的事實(shí)，就要使用相應(yīng)的數(shù)據(jù)挖掘方法，在現(xiàn)今眾多的挖掘法中，其中有一類宏觀的數(shù)據(jù)挖掘采用統(tǒng)計(jì)學(xué)中的綜合評(píng)價(jià)方法。稱面

2、向海量數(shù)據(jù)，使用綜合評(píng)價(jià)方法，利用計(jì)算機(jī)進(jìn)行數(shù)據(jù)挖掘的系統(tǒng)為海量數(shù)據(jù)的綜合評(píng)價(jià)計(jì)算系統(tǒng)。
　　 數(shù)據(jù)挖掘，指的是從大量原始數(shù)據(jù)中，這些數(shù)據(jù)可能不完整的、模糊的、隨機(jī)的，提取其中有潛在價(jià)值的、能被人們利用和理解的信息和知識(shí)的過程。
　　 綜合評(píng)價(jià)是指針對(duì)多屬性體系結(jié)構(gòu)描述的對(duì)象系統(tǒng)做出全局性、整體性的評(píng)價(jià)。綜合評(píng)價(jià)又可分為綜合評(píng)價(jià)方法及評(píng)價(jià)指標(biāo)體系兩類問題。其中前者在管理科學(xué)中已經(jīng)有了大量的研究及成果；后者則與具體應(yīng)用關(guān)聯(lián)

3、比較大。目前，針對(duì)海量數(shù)據(jù)，特別是實(shí)時(shí)到達(dá)的流數(shù)據(jù)系統(tǒng)的指標(biāo)體系計(jì)算系統(tǒng)尚沒有成熟的模型。指標(biāo)體系計(jì)算系統(tǒng)應(yīng)該包括建模、挖掘及指標(biāo)綜合三部分。
　　 在海量數(shù)據(jù)的綜合評(píng)價(jià)中，用直觀量化的數(shù)值指標(biāo)來(lái)反映事物的屬性。當(dāng)分析某一事物時(shí)，實(shí)際上是從某一視角的不同方面分開來(lái)認(rèn)識(shí)事物的，所以一個(gè)屬性的指標(biāo)值，可以用若干個(gè)子指標(biāo)值來(lái)更詳細(xì)地描述。對(duì)指標(biāo)值多次細(xì)分后，指標(biāo)體系就形成了一個(gè)樹狀的體系結(jié)構(gòu)，本文提出的樹狀概要數(shù)據(jù)結(jié)構(gòu)就是針對(duì)這種樹狀

4、指標(biāo)體系而設(shè)計(jì)的。
　　 在數(shù)據(jù)實(shí)時(shí)到達(dá)、規(guī)模無(wú)法預(yù)知的背景下，流數(shù)據(jù)庫(kù)技術(shù)于20世紀(jì)末應(yīng)運(yùn)而生，在金融應(yīng)用、網(wǎng)絡(luò)監(jiān)視、通信數(shù)據(jù)管理、Web應(yīng)用、傳感器網(wǎng)絡(luò)數(shù)據(jù)處理等領(lǐng)域被廣泛應(yīng)用。但是，現(xiàn)有的流數(shù)據(jù)技術(shù)還無(wú)法方便地應(yīng)用在指標(biāo)體系計(jì)算這一特定領(lǐng)域。雖然“基于數(shù)據(jù)倉(cāng)庫(kù)的指標(biāo)體系研究”提出了一種統(tǒng)一的方式來(lái)描述指標(biāo)結(jié)構(gòu)，將指標(biāo)存放在數(shù)據(jù)倉(cāng)庫(kù)中再進(jìn)一步挖掘，但沒有考慮相關(guān)數(shù)據(jù)庫(kù)表、計(jì)算環(huán)境的自動(dòng)構(gòu)建及可配置性，沒有考慮直接從流數(shù)據(jù)中統(tǒng)