基于MapReduce的機(jī)會(huì)網(wǎng)絡(luò)中社會(huì)特性分析方法的研究.pdf

1、近年來(lái)，隨著大量低成本、具備短距離無(wú)線通信能力的移動(dòng)設(shè)備的大量普及，通過(guò)以人為載體的移動(dòng)設(shè)備的相遇機(jī)會(huì)進(jìn)行數(shù)據(jù)交換為特征的機(jī)會(huì)網(wǎng)絡(luò)的發(fā)展對(duì)于實(shí)現(xiàn)未來(lái)普適計(jì)算具有重大影響，因此對(duì)于機(jī)會(huì)網(wǎng)絡(luò)中海量節(jié)點(diǎn)數(shù)據(jù)特征屬性的研究對(duì)企業(yè)和用戶而言已經(jīng)變得越來(lái)越重要了。
　　目前針對(duì)社會(huì)網(wǎng)絡(luò)中節(jié)點(diǎn)數(shù)據(jù)的社會(huì)特性研究是國(guó)內(nèi)外研究的熱點(diǎn)，然而針對(duì)機(jī)會(huì)網(wǎng)絡(luò)中的社會(huì)特性研究卻很少，在對(duì)于機(jī)會(huì)網(wǎng)絡(luò)中海量節(jié)點(diǎn)數(shù)據(jù)進(jìn)行社會(huì)特性分析時(shí)存在如下問(wèn)題：對(duì)于機(jī)會(huì)網(wǎng)絡(luò)中的

2、海量節(jié)點(diǎn)數(shù)據(jù)進(jìn)行分析處理，將面臨數(shù)據(jù)集過(guò)大，處理效率低下的問(wèn)題；運(yùn)用特定計(jì)算模型處理海量數(shù)據(jù)集時(shí)，存在數(shù)據(jù)集格式不規(guī)范，冗余數(shù)據(jù)過(guò)多的問(wèn)題；傳統(tǒng)串行計(jì)算方法的社會(huì)特性分析算法效率低下，無(wú)法滿足對(duì)算法性能方面的需求問(wèn)題。
　　為了高效快捷地對(duì)機(jī)會(huì)網(wǎng)絡(luò)中海量節(jié)點(diǎn)數(shù)據(jù)進(jìn)行社會(huì)特性分析，本文針對(duì)以上三個(gè)問(wèn)題開(kāi)展研究并提出了解決方案：針對(duì)機(jī)會(huì)網(wǎng)絡(luò)分析面對(duì)其呈爆炸式增長(zhǎng)的海量節(jié)點(diǎn)數(shù)據(jù)所帶來(lái)的性能問(wèn)題，本文提出了使用MapReduce并行計(jì)算技

3、術(shù)對(duì)機(jī)會(huì)網(wǎng)絡(luò)中的海量節(jié)點(diǎn)數(shù)據(jù)分析，該技術(shù)將機(jī)會(huì)網(wǎng)絡(luò)抽象成一張圖，將圖中的節(jié)點(diǎn)及節(jié)點(diǎn)間的關(guān)系進(jìn)行標(biāo)準(zhǔn)化建模，運(yùn)用MapReduce框架對(duì)圖中的數(shù)據(jù)進(jìn)行處理，從而有效的提升了運(yùn)算性能和處理效率；針對(duì)基于MapReduce的機(jī)會(huì)網(wǎng)絡(luò)中社會(huì)特性分析所需規(guī)范的數(shù)據(jù)格式問(wèn)題，設(shè)計(jì)并實(shí)現(xiàn)了基于MapReduce的數(shù)據(jù)預(yù)處理算法，該算法從機(jī)會(huì)網(wǎng)絡(luò)原始數(shù)據(jù)集中抽取出所需要的數(shù)據(jù)信息，然后對(duì)其進(jìn)行格式轉(zhuǎn)換以及去重處理，為其社會(huì)特性分析提供了規(guī)范格式的數(shù)據(jù)集

4、；針對(duì)傳統(tǒng)串行計(jì)算方法的社會(huì)特性分析算法性能嚴(yán)重低下的問(wèn)題，提出了兩種改進(jìn)的連通分量并行分析算法：面向無(wú)向圖連通分量的基于MapReduce的標(biāo)簽傳播算法和面向有向圖強(qiáng)連通分量的基于MapReduce的雙向同步標(biāo)簽傳播算法，實(shí)驗(yàn)測(cè)試表明，通過(guò)算法并行化設(shè)計(jì)，減少了算法的計(jì)算量，提高運(yùn)算效率，從而對(duì)機(jī)會(huì)網(wǎng)絡(luò)中海量的節(jié)點(diǎn)信息的社會(huì)特性分析提供了可靠的算法基礎(chǔ)。
　　最后，本文設(shè)計(jì)實(shí)現(xiàn)了一個(gè)基于MapReduce的機(jī)會(huì)網(wǎng)絡(luò)社會(huì)特性分析系