問(wèn)句相似度計(jì)算和候選答案句抽取相關(guān)技術(shù)研究.pdf

1、問(wèn)答是自然語(yǔ)言處理和信息檢索領(lǐng)域的一個(gè)重要研究分支，它融合了多種自然語(yǔ)言處理和信息檢索的相關(guān)技術(shù)，是比搜索引擎更人性化的向人們提供所需信息的一種手段。受社會(huì)的不斷進(jìn)步，網(wǎng)絡(luò)的不斷發(fā)展，信息的急速爆炸的影響，問(wèn)答系統(tǒng)將發(fā)揮越來(lái)越重要的作用。在線客服系統(tǒng)，是問(wèn)答技術(shù)的一種重要表現(xiàn)形式。通過(guò)融合FAQ系統(tǒng)、自動(dòng)問(wèn)答系統(tǒng)、交互式系統(tǒng)，結(jié)合客服人員的輔助向用戶提供所需服務(wù)。近年來(lái)，因其廣闊的市場(chǎng)價(jià)值及應(yīng)用前景，受到人們廣泛的關(guān)注。
　　本文

2、主要研究面向在線客服系統(tǒng)的兩項(xiàng)關(guān)鍵技術(shù)：FAQ模塊中的問(wèn)句相似度計(jì)算和自動(dòng)問(wèn)答模塊中的候選答案句抽取。
　　FAQ系統(tǒng)是早期問(wèn)答系統(tǒng)的一種應(yīng)用形式，現(xiàn)在在線客服系統(tǒng)中多處于一種輔助的角色，同時(shí)也是提高客服系統(tǒng)性能的一種重要手段。FAQ的數(shù)據(jù)通常是一些問(wèn)答對(duì)的集合，問(wèn)句相似度的計(jì)算是FAQ系統(tǒng)能否準(zhǔn)確理解用戶問(wèn)題，并做出正確回答的關(guān)鍵所在。本文采用依存句法分析和詞義相似度計(jì)算相結(jié)合的方式，通過(guò)分析句子中關(guān)鍵句法成分的匹配度配合詞義相

3、似度，計(jì)算問(wèn)句間的相似度。實(shí)驗(yàn)表明該方法取得了較好的效果，更適合于在線客服系統(tǒng)。
　　對(duì)于候選答案句的提取我們采用了兩種方法：基于樹核的方法和基于支持向量機(jī)SVM的方法。前者利用句法分析技術(shù)分析句子的依存結(jié)構(gòu)，通過(guò)依存關(guān)系樹和依存短語(yǔ)樹的匹配度計(jì)算問(wèn)句和候選句的相似度，作為提取候選答案句的依據(jù)；不同于基于樹核方法只使用句法分析結(jié)果，后者通過(guò)綜合分析提取問(wèn)句和候選句間的詞、詞性、詞義、句法、疑問(wèn)詞等特征，訓(xùn)練SVM模型，通過(guò)模型提取