面向數(shù)據(jù)分析的漢語(yǔ)句法結(jié)構(gòu)樹(shù)研究.pdf

1、作為自然語(yǔ)言處理(Natural Language Processing，NLP)領(lǐng)域的一個(gè)核心問(wèn)題，高性能句法分析在NLP應(yīng)用領(lǐng)域中發(fā)揮了重要的作用。由于句法規(guī)則很難窮盡，而且對(duì)漢語(yǔ)真實(shí)語(yǔ)料的處理能力不夠，基于真實(shí)語(yǔ)料數(shù)據(jù)庫(kù)的句法分析成為目前句法分析的主流。然而，由于漢語(yǔ)句子成分太復(fù)雜，直接對(duì)真實(shí)語(yǔ)料進(jìn)行句法分析，性能很難提高，因此，本文首先基于規(guī)則和謂詞識(shí)別技術(shù)，將漢語(yǔ)句子分割成多個(gè)漢語(yǔ)事件描述小句(Chinese Event De

2、scriptive Clause，EDC);然后在構(gòu)建數(shù)據(jù)庫(kù)的基礎(chǔ)上，采用基于面向數(shù)據(jù)分析技術(shù)(Data-Oriented Parsing，DOP)對(duì)漢語(yǔ)EDC進(jìn)行句法分析;最后通過(guò)組合處理實(shí)現(xiàn)完整句子的句法分析。實(shí)驗(yàn)證明以上技術(shù)路線達(dá)到了較好的效果。
　　本文完成的主要工作如下:
　　1、學(xué)習(xí)面向數(shù)據(jù)的句法分析技術(shù);
　　2、構(gòu)建數(shù)據(jù)庫(kù)。DOP句法分析是基于真實(shí)語(yǔ)料數(shù)據(jù)庫(kù)的，為此我們需要構(gòu)建相關(guān)數(shù)據(jù)庫(kù)，本實(shí)驗(yàn)需要的數(shù)

3、據(jù)庫(kù)有漢語(yǔ)問(wèn)句類(lèi)型庫(kù)、問(wèn)句句型庫(kù)、問(wèn)句疑問(wèn)詞庫(kù)、句法片段庫(kù)，句法截?cái)鄮?kù)以及句法片段組合庫(kù)等;
　　3、提出面向事件描述小句的漢語(yǔ)自動(dòng)句法分析的方法和步驟。本文提出在句法分析之前對(duì)真實(shí)語(yǔ)料進(jìn)行小句劃分的預(yù)處理方法，預(yù)處理階段采用一種基于謂詞識(shí)別和規(guī)則方法，將漢語(yǔ)句子分割成多個(gè)事件描述小句;然后基于DOP對(duì)漢語(yǔ)事件描述小句進(jìn)行句法分析;最后通過(guò)組合處理實(shí)現(xiàn)完整句子的句法分析。該方法的好處是可以將句法分析的任務(wù)分步處理，將詞數(shù)較多的復(fù)雜