云存儲(chǔ)系統(tǒng)日志關(guān)聯(lián)規(guī)則挖掘研究.pdf

1、云計(jì)算是目前 IT領(lǐng)域最為熱門(mén)的技術(shù),而云存儲(chǔ)更是云計(jì)算的核心。云存儲(chǔ)系統(tǒng)的日志文件記錄了云存儲(chǔ)基礎(chǔ)設(shè)施的運(yùn)行狀態(tài)、節(jié)點(diǎn)的錯(cuò)誤信息、上層用戶的相應(yīng)情況和用戶對(duì)云存儲(chǔ)系統(tǒng)的訪問(wèn)情況等。對(duì)這些日志文件進(jìn)行挖掘分析對(duì)加強(qiáng)系統(tǒng)性能和提高系統(tǒng)的管理維護(hù)具有非常重要的意義。
　　本文主要研究如何使用關(guān)聯(lián)規(guī)則挖掘算法對(duì)云存儲(chǔ)系統(tǒng)日志進(jìn)行有效地分析,利用挖掘算法從日志文件中挖掘出有效的關(guān)聯(lián)規(guī)則。本文首先介紹了云存儲(chǔ)系統(tǒng),以及日志文件的特點(diǎn)和對(duì)其研

2、究的重要性。其次給出了數(shù)據(jù)挖掘的概念、過(guò)程以及過(guò)程中應(yīng)用到的主要技術(shù),重點(diǎn)介紹了關(guān)聯(lián)規(guī)則的概念和挖掘步驟及分類(lèi)。接著介紹了日志分析的一般過(guò)程,并對(duì)預(yù)處理和模式發(fā)現(xiàn)的關(guān)鍵步驟進(jìn)行詳細(xì)的闡述。詳細(xì)介紹了模式發(fā)現(xiàn)中使用的 Apriori算法的原理和流程,分析了它的不足并且介紹了一種基于矩陣的 Apriori算法。
　　本文針對(duì)云存儲(chǔ)日志的特點(diǎn),對(duì)日志挖掘過(guò)程中的預(yù)處理步驟進(jìn)行了改進(jìn),將不同格式的日志文件統(tǒng)一格式,便于關(guān)聯(lián)規(guī)則挖掘分析,提