基于OLAP技術的WEB日志挖掘方法研究與實踐.pdf

1、隨著Internet的普及和WWW的迅猛發(fā)展，WEB和用戶對WEB訪問的信息已經(jīng)成為世界上最大的信息來源之一。而信息的爆炸式增長與人們注意力的有限性之間的矛盾也隨之加劇，WEB數(shù)據(jù)挖掘是解決這一矛盾的有效手段。而WEB日志挖掘是網(wǎng)絡信息處理的一門新技術，也是數(shù)據(jù)挖掘在Internet領域的一個重要應用，伴隨著Internet的迅速發(fā)展，WEB日志挖掘在電子商務和個性化WEB等方面有著廣泛的應用。通過挖掘WEB日志可以改善網(wǎng)站的組織結(jié)構(gòu)，

2、監(jiān)控服務器的工作情況，改善WEB應用的系統(tǒng)設計，為用戶提供個性化服務。當前WEB日志挖掘的研究大致可以分為三個方向:(1)分析系統(tǒng)性能;(2)改進系統(tǒng)設計;(3)理解用戶意圖。當前研究中大多數(shù)在處理日志數(shù)據(jù)時只是把日志數(shù)據(jù)經(jīng)過簡單處理直接存放在數(shù)據(jù)庫中，能夠根據(jù)日志數(shù)據(jù)的特點，對日志數(shù)據(jù)進行有效提取并對其存儲狀態(tài)進行研究的涉及較少。WEB日志挖掘方法可以分為基于數(shù)據(jù)立方體的方法和基于WEB事務的方法。WEB日志挖掘中,通過分析挖掘用戶訪

3、問路徑的結(jié)果,可以改善站點的設計(如在高度相關的頁面之間提供有效的訪問，改進頁面上的鏈接設計)，改進市場決策。但現(xiàn)有的用戶訪問路徑挖掘算法，大多數(shù)沒有很好考慮如何結(jié)合訪問路徑的特點來改進算法，以得到更好的挖掘結(jié)果及挖掘效率。 本文研究了WEB日志挖掘中的相關技術，在以下幾方面進行了改進:(1)在WEB日志挖掘模型的基礎上，根據(jù)WEB日志半結(jié)構(gòu)化的特點，對WEB日志數(shù)據(jù)的清洗和轉(zhuǎn)換提出了相應的解決方法，將日志文件單元根據(jù)不同屬性存