云計(jì)算在基于貝葉斯分類的垃圾短信過濾中的研究與應(yīng)用.pdf

1、手機(jī)短信依靠移動(dòng)性強(qiáng)、收發(fā)便捷、資費(fèi)低等優(yōu)勢(shì),已逐漸成為人們重要的溝通工具。手機(jī)用戶數(shù)量的不斷增加推著短信發(fā)送數(shù)量呈幾何級(jí)數(shù)上升。垃圾短信的問題也因此突顯出來,不僅對(duì)人們的正常生活造成了諸多的不良影響,還對(duì)公共安全和社會(huì)穩(wěn)定造成了一定程度的危害。因此對(duì)垃圾短信準(zhǔn)確過濾顯得尤其重要。經(jīng)過研究發(fā)現(xiàn),現(xiàn)有的短信過濾技術(shù)存在一些不足;基于黑白名單的過濾技術(shù)顯得過于簡(jiǎn)單粗暴,基于內(nèi)容分析技術(shù)雖然準(zhǔn)確度得到很大程度的提高,但在實(shí)現(xiàn)上也存在著復(fù)雜度過

2、高、易導(dǎo)致信息網(wǎng)絡(luò)阻塞等不足。
　　 研究發(fā)現(xiàn)基于內(nèi)容過濾技術(shù)的不足之處在于計(jì)算能力跟不上,而不是方法不正確。針對(duì)上述過濾技術(shù)的缺點(diǎn),本文詳細(xì)調(diào)查分析了這兩年飛速發(fā)展起來的云計(jì)算技術(shù),發(fā)現(xiàn)其技術(shù)在伸縮性、可靠性、成本等方面具有非常大的優(yōu)勢(shì)。特別需要指出的是依靠它的高擴(kuò)展能力可以把計(jì)算規(guī)模做到無限大,而且成本又非常低,故可以作為不錯(cuò)的計(jì)算平臺(tái)。有這個(gè)基礎(chǔ),本文接著分析了現(xiàn)行基于內(nèi)容過濾器所使用的算法,發(fā)現(xiàn)大部分方案是基于貝葉斯分類

3、原理來實(shí)現(xiàn)的。經(jīng)過研究貝葉斯分類算法基礎(chǔ),并做了大量相關(guān)實(shí)驗(yàn),發(fā)現(xiàn)其可以在云計(jì)算平臺(tái)上通過MapReduce編程模型來實(shí)現(xiàn)。
　　 本文主要工作如下:
　　 (1)深入分析正在使用的垃圾短信過濾的實(shí)現(xiàn)方案,對(duì)各過濾實(shí)現(xiàn)方式的原理及其性能做仔細(xì)分析比較
　　 (2)分析了云計(jì)算技術(shù)各種應(yīng)用,重點(diǎn)對(duì)云計(jì)算的Hadoop開源實(shí)現(xiàn)方案中的MapReduce編程模型做深入的研究。
　　 (3)對(duì)于貝葉斯分類器的基礎(chǔ)