基于特征信息提取的中文自動(dòng)文摘研究.pdf

1、隨著現(xiàn)代科技的高速發(fā)展，報(bào)紙、書籍、科技文獻(xiàn)等以文字為載體的信息大量涌現(xiàn)。尤其是在計(jì)算機(jī)和國(guó)際互聯(lián)網(wǎng)絡(luò)高速發(fā)展的帶動(dòng)下，每天都會(huì)有不斷涌現(xiàn)的海量信息。為了能從這些海量的信息中快速、準(zhǔn)確的找到用戶需要的信息，文檔的自動(dòng)摘要處理成為越來越被關(guān)注的研究課題。 作為自然語(yǔ)言處理領(lǐng)域的一個(gè)重要應(yīng)用，自動(dòng)文摘涉及到了大量的理論和應(yīng)用技術(shù)。人們對(duì)中文自動(dòng)文摘的研究已經(jīng)有20多年了，限于相關(guān)領(lǐng)域所有的技術(shù)水平，自動(dòng)文摘系統(tǒng)還不能進(jìn)行完全的自動(dòng)語(yǔ)

2、法、語(yǔ)義和語(yǔ)境分析，摘要結(jié)果還屬于指示性摘要范疇?；谀壳暗难芯楷F(xiàn)狀下，采用統(tǒng)計(jì)學(xué)方法發(fā)現(xiàn)文章特征，獲取文章特征信息，在此基礎(chǔ)上建立一個(gè)自動(dòng)文摘系統(tǒng)，能生成一個(gè)簡(jiǎn)單、準(zhǔn)確、全面的摘要，使用戶能快速的從海量信息中獲取有用的信息。 本文結(jié)合目前的研究現(xiàn)狀，利用統(tǒng)計(jì)學(xué)知識(shí)，考慮文章的體裁、類型，針對(duì)文章中出現(xiàn)的特征詞的性質(zhì)進(jìn)行不同的打分，設(shè)計(jì)出一個(gè)基于特征信息提取的中文自動(dòng)文摘系統(tǒng)。研究主要包括以下幾部分： (1)研究比較了當(dāng)

3、前自動(dòng)文摘研究方法，分析了基于統(tǒng)計(jì)的方法的可行性及其適用范圍： (2)本文提出一種基于特征信息提取的中文自動(dòng)文摘方法，分析原始文本中的特征詞關(guān)系和特征，構(gòu)造向量空間模型；通過計(jì)算句子的重要度以及去除文章冗余等方法，獲得文摘結(jié)果； (3)設(shè)計(jì)一個(gè)基于特征信息提取的中文自動(dòng)文摘系統(tǒng)； (4)為了驗(yàn)證提出的中文自動(dòng)文摘方法的可行性與有效性，本文采用內(nèi)部評(píng)測(cè)對(duì)開發(fā)的文摘系統(tǒng)進(jìn)行評(píng)估。分別從國(guó)家語(yǔ)委語(yǔ)料庫(kù)中抽取不同體裁以及