文本信息處理中漢語句法分析方法研究.pdf

1、本文研究了文本信息處理中漢語句法分析方法，核心工作可以概括為以下三個(gè)方面： 1.對現(xiàn)有的一些句法分析算法和模型進(jìn)行了比較、綜合。在總結(jié)前人研究成果的基礎(chǔ)上，對傳統(tǒng)的漢語句法分析算法加以改進(jìn)，采用了自底向上與自頂向下相結(jié)合的線圖分析方法，提高了分析效率，也使得分析結(jié)果的準(zhǔn)確率有一定的提高。 2.設(shè)計(jì)了一套常用的漢語句型庫作為研究基礎(chǔ)，根據(jù)實(shí)際應(yīng)用，確定了一套詞性標(biāo)記集和短語標(biāo)記集，并根據(jù)常用的句型，設(shè)計(jì)了一套基于上下文無關(guān)

2、的語法規(guī)則庫。 3.分析、設(shè)計(jì)和實(shí)現(xiàn)了一個(gè)漢語句法分析原型系統(tǒng)，實(shí)現(xiàn)了基于最大詞長匹配算法的分詞模塊和基于相對頻率訓(xùn)練的統(tǒng)計(jì)方法的詞性標(biāo)注模塊；實(shí)現(xiàn)了基于改進(jìn)的線圖分析算法的句法分析模塊。 本文使用北大計(jì)算語言研究所制作的PFR人民日報(bào)標(biāo)注語料庫作為訓(xùn)練樣本，根據(jù)本文確定的詞性標(biāo)記集和短語標(biāo)記集，以及本文設(shè)計(jì)的一套語法規(guī)則庫，使用VC++6.0開發(fā)工具，實(shí)現(xiàn)了一個(gè)漢語句法分析原型系統(tǒng)，并進(jìn)行小規(guī)模中文文本試驗(yàn)測試，驗(yàn)證本