基于正向最大匹配算法的優(yōu)化算法ImpFMMseg的實現(xiàn).pdf

1、由于來自于網(wǎng)絡的信息具備信息量大、信息來源復雜等特點，人們在查找自己需要的信息時，已經(jīng)習慣使用搜索引擎作為信息篩選的工具。傳統(tǒng)的主要查詢模式有目錄查詢、關鍵詞查詢等，這些模式的應用在一定程度上簡化了查詢過程，即便如此，它們仍然存在各自的局限性。近年來，自然語言理解領域的中外專家們一直致力于將自然語言理解技術與搜索技術更好地結合。與傳統(tǒng)查詢模式相比，自然語言查詢模式的優(yōu)勢在于它的人性化和以保證查詢效率為前提的準確率。漢語自動分詞是目前中文

2、信息處理領域公認的一大難題，也是自然語言理解研究領域中最基本的一個環(huán)節(jié)。中文自動分詞就是將用自然語言書寫的文章、句段經(jīng)計算機處理后，以詞為單位逐詞輸出，為緊隨其后的加工處理提供先決條件。可見，中文自動分詞是自然語言處理的第一個步驟，其重要性勿庸置疑。在本文的四個章節(jié)中，筆者研究了中文自動分詞的背景、發(fā)展現(xiàn)狀及課題意義，分析了中文自動分詞的三種常用算法并比較了它們的優(yōu)劣，簡要介紹了常用的幾種漢字編碼規(guī)范，最后對基于字符串匹配的分詞算法中的