藏文網(wǎng)頁摘要自動(dòng)生成系統(tǒng)的研究.pdf

1、隨著互聯(lián)網(wǎng)時(shí)代的發(fā)展，如何有效地組織和分析藏文信息，提高藏文信息領(lǐng)域獲取信息的效率，成為滿足藏文信息領(lǐng)域人們需求的關(guān)鍵問題，這使得藏文網(wǎng)頁技術(shù)成為研究熱點(diǎn)，其進(jìn)步推動(dòng)了相關(guān)技術(shù)的發(fā)展。藏文網(wǎng)頁是為了達(dá)到特定用戶或任務(wù)要求，從信息源中提取重要信息、生成精簡(jiǎn)版本的過程。目前，藏文網(wǎng)頁的研究面臨冗余信息、壓縮比大和可讀性差等問題。生成一篇好的文本，不但需要對(duì)文檔進(jìn)行深入地分析，還需要有效的處理文本句選擇與排序。文本句的選擇決定了最終文本的組成

2、成分，文本句的排序決定了文本的可讀性，這兩者都直接影響生成文本的質(zhì)量。
　　本研究主要內(nèi)容包括：⑴設(shè)計(jì)藏文網(wǎng)頁爬蟲。設(shè)計(jì)并實(shí)現(xiàn)了一個(gè)能夠從互聯(lián)網(wǎng)上爬取藏文網(wǎng)頁的網(wǎng)絡(luò)爬蟲工具。⑵藏文網(wǎng)頁的預(yù)處理。設(shè)計(jì)出了能夠識(shí)別藏文網(wǎng)頁文本的凈化工具，并重點(diǎn)研究了基于藏文詞典、規(guī)則、最大概率法和格助詞相結(jié)合的藏文網(wǎng)頁文本自動(dòng)分詞方法。⑶藏文網(wǎng)頁的生成算法研究。研究并提出一種有效的藏文句子加權(quán)方法，根據(jù)句子權(quán)重的計(jì)算，生成了藏文網(wǎng)頁的初始文本，并對(duì)初