語義角色標注中的關鍵技術研究——多任務學習方法在組塊分析中的應用.pdf

1、在自然語言處理過程中，語義分析是一個不可或缺的階段。通過語義角色標注，我們可以獲取淺層語義信息。所謂淺層語義信息，是與概念深層語義相對而言的。語義角色標注是語法與語義的接口。
　　 語義角色標注任務需要對語料進行一些預處理操作，包括：分詞、詞性標注、組塊分析。其中，組塊分析與深層語義信息直接相關，對于語義分析的質量也起著至關重要的作用，已引起研究者的廣泛關注。
　　 傳統(tǒng)的組塊分析系統(tǒng)大多采用單任務學習（Single—t

2、ask Learning）模式下的統(tǒng)計方法，如Conditional Random Files模型，Support VectorMachine模型，Maximum Entropy Markov模型。它們雖然取得取得了不錯的性能，但是我們并不知道哪種模型對于組塊分析任務是最佳的模型，哪種特征或特征組合是最為有效的。
　　 多任務學習（Multi—task Learning，MTL）方法能夠在一定程度上解決此問題。多任務學習以并行的

3、方式學習多個輔助任務，并用一個共享的結構來刻畫這些任務間的共享信息，以此來提升目標任務的性能。
　　 交互結構優(yōu)化（Alternating Structure OptimizatioN,ASO）算法是最近提出一種線性多任務學習方法。它的有效性在半監(jiān)督和監(jiān)督模式下都得到了驗證，我們在Chinese Tree：Bank2.0數(shù)據(jù)集上的實驗證明它對于中文數(shù)據(jù)集同樣有效。但是之前這些方法都需要引入大量的外部數(shù)據(jù)來獲得性能的提升。因此，能