日語依存句法分析技術(shù)研究.pdf

1、日語依存關(guān)系解析是日語句子解析的一項(xiàng)基本技術(shù)，主要基于日語依存語法來確定句子中文節(jié)與文節(jié)間的依存關(guān)系。句法分析是進(jìn)行語義分析等深層自然語言處理的首要基礎(chǔ)，是諸多自然語言處理應(yīng)用系統(tǒng)不可或缺的一個(gè)重要環(huán)節(jié)。依存關(guān)系解析在機(jī)器翻譯、信息抽取、自動(dòng)問答等領(lǐng)域有著重要的應(yīng)用。
　　目前對(duì)日語依存解析的相關(guān)研究，重點(diǎn)都集中在對(duì)學(xué)習(xí)框架的修改上，機(jī)器學(xué)習(xí)算法大多采用支持向量機(jī)或其他基于邊界和記憶學(xué)習(xí)的方法。條件隨機(jī)場(chǎng)作為一種優(yōu)秀的序列標(biāo)注器，

2、在序列標(biāo)注方面有著出色的表現(xiàn)，被成功地運(yùn)用在自然語言處理的任務(wù)中，并取得了很好的效果，但是在日語依存關(guān)系解析方面，卻未見相關(guān)的報(bào)道。本文采用層疊組塊算法和條件隨機(jī)場(chǎng)相結(jié)合的方法進(jìn)行日語依存關(guān)系解析，融入豐富的上下文信息，從整句的角度給予每個(gè)標(biāo)注單元一個(gè)最優(yōu)的標(biāo)注結(jié)果。在日本京都大學(xué)文本語料庫(kù)(Version4.0)上的實(shí)驗(yàn)結(jié)果表明，該方法在不使用動(dòng)態(tài)特征的條件下，依存正確率和句子正確率分別取得了很好的效果。
　　規(guī)則方法作為統(tǒng)計(jì)方

3、法的有益補(bǔ)充，仍被廣泛的用于自然語言處理的諸多領(lǐng)域中。傳統(tǒng)的規(guī)則獲取是根據(jù)知識(shí)工程師的經(jīng)驗(yàn)和知識(shí)手工編寫，完全依賴于編寫規(guī)則的知識(shí)工程師的語言知識(shí)，獲取規(guī)則集合需要大量的人力和物力。針對(duì)傳統(tǒng)的獲取規(guī)則方法的不足，本文采用了基于條件隨機(jī)場(chǎng)的錯(cuò)誤驅(qū)動(dòng)機(jī)制，將條件隨機(jī)場(chǎng)的一次識(shí)別結(jié)果作為特征加入到條件隨機(jī)場(chǎng)二次識(shí)別的特征模板中，利用統(tǒng)計(jì)方法來自動(dòng)學(xué)習(xí)其中的錯(cuò)誤規(guī)律，訓(xùn)練得到機(jī)器識(shí)別模型并進(jìn)行糾錯(cuò)，在上述的語料庫(kù)上的實(shí)驗(yàn)結(jié)果表明，該方法進(jìn)一步提