云計算在基于貝葉斯分類的垃圾短信過濾中的研究與應用.pdf

1、手機短信依靠移動性強、收發(fā)便捷、資費低等優(yōu)勢,已逐漸成為人們重要的溝通工具。手機用戶數(shù)量的不斷增加推著短信發(fā)送數(shù)量呈幾何級數(shù)上升。垃圾短信的問題也因此突顯出來,不僅對人們的正常生活造成了諸多的不良影響,還對公共安全和社會穩(wěn)定造成了一定程度的危害。因此對垃圾短信準確過濾顯得尤其重要。經(jīng)過研究發(fā)現(xiàn),現(xiàn)有的短信過濾技術存在一些不足;基于黑白名單的過濾技術顯得過于簡單粗暴,基于內容分析技術雖然準確度得到很大程度的提高,但在實現(xiàn)上也存在著復雜度過

2、高、易導致信息網(wǎng)絡阻塞等不足。
　　 研究發(fā)現(xiàn)基于內容過濾技術的不足之處在于計算能力跟不上,而不是方法不正確。針對上述過濾技術的缺點,本文詳細調查分析了這兩年飛速發(fā)展起來的云計算技術,發(fā)現(xiàn)其技術在伸縮性、可靠性、成本等方面具有非常大的優(yōu)勢。特別需要指出的是依靠它的高擴展能力可以把計算規(guī)模做到無限大,而且成本又非常低,故可以作為不錯的計算平臺。有這個基礎,本文接著分析了現(xiàn)行基于內容過濾器所使用的算法,發(fā)現(xiàn)大部分方案是基于貝葉斯分類

3、原理來實現(xiàn)的。經(jīng)過研究貝葉斯分類算法基礎,并做了大量相關實驗,發(fā)現(xiàn)其可以在云計算平臺上通過MapReduce編程模型來實現(xiàn)。
　　 本文主要工作如下:
　　 (1)深入分析正在使用的垃圾短信過濾的實現(xiàn)方案,對各過濾實現(xiàn)方式的原理及其性能做仔細分析比較
　　 (2)分析了云計算技術各種應用,重點對云計算的Hadoop開源實現(xiàn)方案中的MapReduce編程模型做深入的研究。
　　 (3)對于貝葉斯分類器的基礎