復(fù)雜數(shù)據(jù)流分析關(guān)鍵技術(shù)研究.pdf

1、近些年，在傳感器網(wǎng)絡(luò)、互聯(lián)網(wǎng)監(jiān)控、金融交易等領(lǐng)域，出現(xiàn)了數(shù)據(jù)流分析的應(yīng)用需求。然而，傳統(tǒng)的數(shù)據(jù)處理方式不能很好地解決這種數(shù)據(jù)流分析應(yīng)用，針對(duì)這些應(yīng)用的數(shù)據(jù)流分析技術(shù)在學(xué)術(shù)上和工業(yè)上都受到了高度關(guān)注。隨著復(fù)雜數(shù)據(jù)流分析的需求增加，研究復(fù)雜數(shù)據(jù)流分析的關(guān)鍵技術(shù)也越來(lái)越重要。在進(jìn)行復(fù)雜數(shù)據(jù)流分析時(shí)，現(xiàn)有的解決方法通常是設(shè)計(jì)特定的復(fù)雜概要數(shù)據(jù)分析算法來(lái)解決。但對(duì)于越來(lái)越多的各種復(fù)雜數(shù)據(jù)流分析應(yīng)用，每次都開(kāi)發(fā)相應(yīng)的分析算法來(lái)解決的方式顯然不能很好

2、地滿足需求，一種更好的方式是重復(fù)利用一些比較通用的分析算法，通過(guò)與其他算法的組合來(lái)完成復(fù)雜數(shù)據(jù)流分析。然而，在組合分析時(shí)一個(gè)分析算子的輸出數(shù)據(jù)如何很好地傳給后續(xù)分析算子的問(wèn)題需要得到解決，也就是兩個(gè)算子之間的數(shù)據(jù)交換問(wèn)題。
　　結(jié)合數(shù)據(jù)流分析要求的高效的時(shí)間空間性能，設(shè)計(jì)了較為高效和通用的數(shù)據(jù)交換方式。數(shù)據(jù)交換采用了基于模式匹配的星狀交換方式，該方式中需要解決中間數(shù)據(jù)模型，數(shù)據(jù)模式的描述，模式匹配過(guò)程和模式轉(zhuǎn)換描述幾個(gè)關(guān)鍵問(wèn)題。結(jié)

3、合數(shù)據(jù)流分析中關(guān)系數(shù)據(jù)和復(fù)雜數(shù)據(jù)的不同特點(diǎn)，設(shè)計(jì)了中間數(shù)據(jù)的元數(shù)據(jù)模型；同時(shí)設(shè)計(jì)了基于XML標(biāo)簽對(duì)該數(shù)據(jù)模型中的數(shù)據(jù)模式進(jìn)行描述；給出了模式匹配的兩個(gè)要點(diǎn)：結(jié)構(gòu)匹配與類型匹配，同時(shí)為了最佳匹配考慮了名稱匹配的問(wèn)題；最后利用可根據(jù)數(shù)據(jù)模式預(yù)分配實(shí)際數(shù)據(jù)的特點(diǎn)，設(shè)計(jì)了簡(jiǎn)單高效的模式轉(zhuǎn)換描述。
　　介紹了研究中實(shí)現(xiàn)的數(shù)據(jù)流實(shí)時(shí)分析平臺(tái)系統(tǒng)，同時(shí)介紹了其中數(shù)據(jù)交換的測(cè)試分析。對(duì)于復(fù)雜數(shù)據(jù)流分析中數(shù)據(jù)交換的設(shè)計(jì)能夠比較高效和通用地解決組合數(shù)