基于XML的Web內容挖掘研究.pdf

1、隨著互聯網的發(fā)展，WWW上信息的快速增長，WWW為人們提供了大量的信息，但也使得我們陷入一個矛盾，那就是一方面人們迫切地需要從Web上快速、有效地獲取知識，另一方面是Web上信息的數量龐太大并且信息內容結構復雜，處理這些信息具有很多困難。為了解決這個矛盾，Web挖掘技術提供了一種途徑，目前Web挖掘的研究正處在不斷發(fā)展的階段，需要在理論、實現方法與技術上進行大量的研究。Web挖掘技術是傳統數據挖掘技術在Web環(huán)境下的應用，從大量的Wed

2、文檔集合和用戶瀏覽Web的數據信息中發(fā)現蘊涵的、未知的、有潛在應用價值的、非平凡的模式。根據Web挖掘研究的對象，Web挖掘分為三類：Web內容挖掘，Web結構挖掘和Web使用記錄挖掘，Web內容挖掘是論文研究的主要內容。由于現有的搜索引擎僅用于Web上的信息檢索，無法發(fā)現Web上潛在的知識，多數用戶在用搜索引擎給出的搜索結果時都很難從中發(fā)現自己感興趣的內容，為了解決這個現狀，論文展開了對Web內容挖掘技術的研究。 論文分析了現

3、有的數據挖掘、Web挖掘和XML技術的一些基本概念、方法和技術，通過對半結構化數據的處理及所涉及的關鍵技術，如抽取方法、轉換算法等方面的研究，提出了一種基于棧結構的數據格式轉換方案，將半結構化的HTML數據轉換為XML格式的結構化數據，得到有效的XML格式的待挖掘數據。提出了利用XML數據建立供挖掘使用的多層Web數據庫的方法。通過對現有數據挖掘的決策樹算法和聚類分類算法的研究，根據實際應用的需要對這兩個算法進行了修改，使之適用于當前W