基于HTTP協(xié)議面向藏文文本的實(shí)時(shí)監(jiān)測(cè)技術(shù)研究.pdf

1、2014年以來(lái)網(wǎng)絡(luò)信息安全成為當(dāng)今社會(huì)的熱門(mén)話題。網(wǎng)絡(luò)信息安全不僅包括網(wǎng)絡(luò)信息的保密性、完整性和真實(shí)可靠性方面，還包括對(duì)網(wǎng)絡(luò)中充斥著的大量垃圾信息的監(jiān)管和預(yù)防。目前以漢語(yǔ)為對(duì)象的垃圾信息過(guò)濾以及文本監(jiān)測(cè)技術(shù)已經(jīng)非常成熟，但是以藏文文本為對(duì)象的檢測(cè)技術(shù)還有待發(fā)展。隨著藏文編碼國(guó)際標(biāo)準(zhǔn)和國(guó)家標(biāo)準(zhǔn)的發(fā)布和普及，藏文分詞技術(shù)的日益完善和提高，基于藏文國(guó)際編碼標(biāo)準(zhǔn)和藏文分詞技術(shù)的各類(lèi)應(yīng)用需求不斷呈現(xiàn)出來(lái)。
　　網(wǎng)絡(luò)信息安全對(duì)維護(hù)國(guó)家利益，維

2、護(hù)社會(huì)穩(wěn)定，推動(dòng)信息技術(shù)發(fā)展有著重要意義。遏制垃圾信息的傳播，以及對(duì)出現(xiàn)垃圾信息的及時(shí)預(yù)警是網(wǎng)絡(luò)信息安全不可或缺的一部分。一個(gè)實(shí)時(shí)監(jiān)測(cè)預(yù)警系統(tǒng)能起到維護(hù)網(wǎng)絡(luò)環(huán)境和諧、快速反應(yīng)敏感信息、協(xié)助網(wǎng)管人員及時(shí)處理突發(fā)情況等作用。
　　本文提出了基于HTTP協(xié)議面向藏文文本的實(shí)時(shí)監(jiān)測(cè)系統(tǒng)的整體構(gòu)架，并根據(jù)此架構(gòu)實(shí)現(xiàn)了一個(gè)藏文文本實(shí)時(shí)監(jiān)測(cè)系統(tǒng)。文中主要通過(guò)研究基于HTTP的數(shù)據(jù)還原技術(shù)，實(shí)時(shí)抓取網(wǎng)絡(luò)中傳輸?shù)幕贖TTP協(xié)議的數(shù)據(jù)包，并對(duì)數(shù)據(jù)包

3、進(jìn)行排序、拆分重組、數(shù)據(jù)解壓，從而實(shí)現(xiàn)實(shí)時(shí)還原HTTP數(shù)據(jù)內(nèi)容；通過(guò)研究多語(yǔ)言環(huán)境中藏文文本抽取方法，根據(jù)還原文本數(shù)據(jù)的編碼方式，采取對(duì)應(yīng)的藏文文本抽措施，實(shí)現(xiàn)抽取藏文文本的功能；通過(guò)研究有限自動(dòng)機(jī)（DFA）算法和哈希表查找算法，利用有限自動(dòng)機(jī)的思想，結(jié)合哈希表查找算法的特性，提出一個(gè)高效的關(guān)鍵詞查找算法，實(shí)現(xiàn)實(shí)時(shí)預(yù)警關(guān)鍵詞的功能。本文首次提出并實(shí)現(xiàn)將藏文分詞技術(shù)應(yīng)用到藏文文本實(shí)時(shí)監(jiān)測(cè)系統(tǒng)中。藏文分詞技術(shù)的應(yīng)用，有利于提高實(shí)時(shí)預(yù)警系統(tǒng)的