基于HADOOP平臺的并行關(guān)聯(lián)規(guī)則算法研究.pdf

1、在數(shù)據(jù)挖掘研究領(lǐng)域中，關(guān)聯(lián)規(guī)則算法因其具有目的明確、實現(xiàn)靈活、應(yīng)用范圍廣泛等特點成為挖掘數(shù)據(jù)深層價值的重要手段。在大數(shù)據(jù)時代，如何能夠以更低的成本以及更高效準(zhǔn)確的從海量數(shù)據(jù)中挖掘出有價值的信息，以幫助決策者更加科學(xué)的制定決策已成為數(shù)據(jù)挖掘領(lǐng)域的新課題。
　　云計算的出現(xiàn)為海量數(shù)據(jù)挖掘帶來了新的解決方案。Hadoop是由Apache基金會開源實現(xiàn)的一種云計算技術(shù)，它的關(guān)鍵技術(shù)是Hadoop分布式文件系統(tǒng)和MapReduce并行編程框

2、架。在深入研究傳統(tǒng)數(shù)據(jù)挖掘算法的基礎(chǔ)上，如何結(jié)合新的框架對傳統(tǒng)據(jù)挖掘算法進行改進使之能夠處理海量數(shù)據(jù)挖掘問題，是數(shù)據(jù)挖掘領(lǐng)域的一個熱點。
　　本文首先詳細研究了云計算、Hadoop的分布式文件系統(tǒng)HDFS以及MapReduce并行編程框架。然后，對數(shù)據(jù)挖掘和關(guān)聯(lián)規(guī)則概念進行了闡述，并對關(guān)聯(lián)規(guī)則中的經(jīng)典的Apriori算法進行了詳細的分析研究，并在此基礎(chǔ)之上給出了算法的一個具體實例，然后將Apriori算法結(jié)合Hadoop平臺進行并