蒙古文停用詞和英文停用詞比較研究.pdf

1、隨著互聯(lián)網(wǎng)的普及和社會信息化的發(fā)展,使用檢索系統(tǒng)的用戶變得越來越多,文檔的語言種類及內(nèi)容也越來越多。由于蒙古文的獨特性,相對英文、漢文等語種而言,對蒙古文信息檢索的研究還不夠深入,尤其對蒙古文信息檢索中的細節(jié)問題的研究更少,例如對蒙古文停用詞的研究。
　　 本文首先采用TF、DF、EC和UE方法初步獲得蒙古文停用詞表。由于本文所采用的蒙古文文檔集的內(nèi)容有局限性,初步獲得的停用詞表中含有與文檔主題關系較大的實體名詞,同時還含有蒙古

2、文中的同形異義詞。為了比較研究信息檢索中蒙古文停用詞表和英文停用詞表,本文結(jié)合蒙古文的特點對以上四種方法初步獲得的蒙古文停用詞的交集進行了優(yōu)化。優(yōu)化方法是先從初步獲得的蒙古文停用詞表中去掉與文檔主題關系較大的名詞和蒙古文同形異義詞,然后再從詞性角度分析兩種停用詞表,最后將英文停用詞翻譯成蒙古文應用到蒙古文文檔集中與蒙古文停用詞進行了檢索比較,又將蒙古文停用詞翻譯成英文應用到英文文檔集中與英文停用詞進行了檢索比較。
　　 從254