比較句與比較關(guān)系識別研究及其應(yīng)用.pdf

1、眾所周知，比較是人類認(rèn)識世界的一種重要手段和有說服力的表達(dá)方式，是世界各種語言的最重要的組成部分。隨著Web2.0的深入發(fā)展，Internet技術(shù)更加注重與普通用戶的交互，用戶不僅是網(wǎng)站內(nèi)容的讀者，也是網(wǎng)站內(nèi)容的作者。尤其最近幾年，微博、播客、日志、維基、論壇等新型網(wǎng)絡(luò)元素異軍突起，使得網(wǎng)絡(luò)信息更加個性化和多元化。這些信息中不乏是對各種新事物、新理論、新技術(shù)、新產(chǎn)品、新觀點、新藝術(shù)的評論比較的文本信息。利用自然語言處理技術(shù)，高效地從這些

2、信息中識別比較句和比較關(guān)系已成為近年來一個新穎的研究課題。
　　論文在已有研究的基礎(chǔ)上，對比較句與比較關(guān)系的自動識別做了系統(tǒng)深入的研究。主要包括以下幾個方面的工作：
　?、偬岢鲮刂灯胶馑惴?EBA)用來對語料的類別偏斜問題進(jìn)行平衡處理。該算法基于熵是度量一個系統(tǒng)有序程度的原理，通過計算每個詞匯的熵值，選擇滿足閾值的詞匯構(gòu)造平衡關(guān)鍵字集合，再用這個集合過濾每個類別的語料文本數(shù)據(jù)，使得大類的樣本規(guī)模與小類的樣本規(guī)模接近于1:1。

3、該算法在對語料庫中比較句與非比較句比例為796:8010的平衡結(jié)果為701:1226，達(dá)到了平衡的預(yù)期目標(biāo)。
　?、谔岢龌谛畔㈧氐谋容^句識別方法。該方法提取類間分布不均勻而類內(nèi)分布均勻的詞匯作為比較句的統(tǒng)計特征；利用Apriori算法挖掘滿足最小支持度minsup和最小置信度minconf的詞性序列模式作為比較句的序列特征。然后使用信息增益(IG)對得到的特征進(jìn)行特征選擇。最后使用SVM和NB分類器對語料的特征向量進(jìn)行分類。實驗

4、表明該方法的F1值為81％，能有效地識別比較句。
　?、厶岢龌谡Z義角色句法分析樹的比較關(guān)系識別方法。該方法將句法分析樹和語義角色標(biāo)注相融合，構(gòu)造一種新的語義角色分析樹，并設(shè)計了子樹間的匹配相似度計算函數(shù)，計算最大可能的抽取結(jié)果，旨在提取比較關(guān)系中比較主體，比較客體，比較內(nèi)容和比較結(jié)果。實驗結(jié)果顯示，對只含有一個關(guān)系的比較關(guān)系抽取效果較好，對含有多個關(guān)系的比較關(guān)系抽取，效果有待進(jìn)一步提高。
　?、軐崿F(xiàn)了產(chǎn)品評論挖掘中比較句與