搭配距離在自動(dòng)分詞分句中的應(yīng)用.pdf

1、隨著自然語言應(yīng)用系統(tǒng)的進(jìn)步，對(duì)自然語言處理的基礎(chǔ)部分，自動(dòng)分詞分句的準(zhǔn)確率的要求也越來越高。漢語自動(dòng)分詞分句的自動(dòng)評(píng)判系統(tǒng)的研究已經(jīng)成為一項(xiàng)亟待解決的緊迫課題。 雖然學(xué)術(shù)界不斷有研究人員提出自動(dòng)評(píng)判的部分機(jī)制，但仍存在很多不足之處。例如，大部分機(jī)制都僅僅支持部分詞類或部分搭配的評(píng)判；評(píng)判的召回率和準(zhǔn)確率偏低等。漢語自動(dòng)分詞分句的自動(dòng)評(píng)判的研究總的來說還處在剛剛起步的階段。從事這方面研究的人員還不是很多，公開發(fā)表的論文也比較少。

2、 本文在目前漢語分詞分句技術(shù)和各種評(píng)判機(jī)制的深入研究和分析的基礎(chǔ)上，借鑒了人們?cè)陬愃茊栴}上的思考模式，選擇以語義知識(shí)庫為問題的突破口，利用漢語詞與詞之間詳細(xì)而復(fù)雜的關(guān)系網(wǎng)絡(luò)，試圖找到一種度量方法以確定其是否搭配。本文通過對(duì)現(xiàn)今主流語義知識(shí)庫的研究和分析，提出了以知網(wǎng)為支撐，以語義距離為骨架的新概念：搭配距離。 本文詳細(xì)介紹了搭配距離的概念定義和計(jì)算方法，并給出部分計(jì)算實(shí)例。從實(shí)例就能很明顯的看到，搭配距離能很有效地度量詞與