基于大數(shù)據(jù)應(yīng)用云計算技術(shù)評估詳實(shí)房屋震害損失的研究.pdf

1、房屋震害損失評估是地震災(zāi)害損失評估非常重要的一環(huán)，對震后災(zāi)區(qū)救援和復(fù)建具有很大的指導(dǎo)意義和參考價值。傳統(tǒng)的房屋震害損失評估采取抽樣方法來采集數(shù)據(jù)，然后基于這些具有一定代表性的數(shù)據(jù)來進(jìn)行評估，然而，用樣本數(shù)據(jù)來代替總體數(shù)據(jù)是一種“無奈之舉”，會在一定程度上削弱評估結(jié)果的準(zhǔn)確性。
　　隨著信息時代的到來，各個行業(yè)領(lǐng)域的信息量快速增長，數(shù)據(jù)類型越來越復(fù)雜，大數(shù)據(jù)的概念就是在這樣的背景下被提出的。大數(shù)據(jù)不僅僅是數(shù)據(jù)量巨大，同時還兼具異構(gòu)性

2、和價值性。但是要想發(fā)掘大數(shù)據(jù)所蘊(yùn)藏的價值性，需要便捷快速、經(jīng)濟(jì)的運(yùn)算工具。云計算是一種通過共享云端資源池來實(shí)現(xiàn)低成本高運(yùn)算的計算模式，目前，公認(rèn)是處理大數(shù)據(jù)的最佳利器。地震災(zāi)害評估方面的數(shù)據(jù)也在急劇增長中，面對這種增長，傳統(tǒng)的計算和數(shù)據(jù)存儲方法在處理速度上越發(fā)顯得捉襟見肘。《中共中央國務(wù)院關(guān)于進(jìn)一步加強(qiáng)城市規(guī)劃建設(shè)管理工作的若干意見》指出要“推進(jìn)城市智慧管理。加強(qiáng)城市管理和服務(wù)體系智能化建設(shè)，促進(jìn)大數(shù)據(jù)、物聯(lián)網(wǎng)、云計算等現(xiàn)代信息技術(shù)與城

3、市管理服務(wù)融合，提升城市治理和服務(wù)水平?！钡卣馂?zāi)害評估也需要推進(jìn)智慧管理，將現(xiàn)代信息技術(shù)手段引入到地震災(zāi)害評估等相關(guān)領(lǐng)域，以此得到更好的發(fā)展。
　　論文主要做了以下幾項工作:
　　1)綜述大數(shù)據(jù)、云計算在地震數(shù)據(jù)處理領(lǐng)域運(yùn)用的國內(nèi)外發(fā)展現(xiàn)狀。通過大量的資料查詢以及分析對比工作，最終選定本文的云開發(fā)平臺為Hadoop。同時結(jié)合本文數(shù)據(jù)存儲以及計算速度的需求，明確了本文采用的云計算三項技術(shù):MapReduce編程模型、HDFS分

4、布式文件系統(tǒng)以及HBase非關(guān)系型數(shù)據(jù)庫，并對這三項相關(guān)技術(shù)進(jìn)行了必要的介紹。
　　2)詳細(xì)分析了目前傳統(tǒng)房屋震害損評估方法存在的不足，結(jié)合房屋震害數(shù)據(jù)采集手段不斷進(jìn)步的發(fā)展趨勢，設(shè)計了一種理想化的基于大數(shù)據(jù)應(yīng)用云計算技術(shù)評估詳實(shí)房屋震害損失的方法，重點(diǎn)是用全數(shù)據(jù)參與評估。并且完成以下幾部分設(shè)計:a）數(shù)據(jù)存儲方面，設(shè)計出合理的便于存儲以及進(jìn)行數(shù)據(jù)操作的HBase數(shù)據(jù)表結(jié)構(gòu)。并且完成了數(shù)據(jù)批量錄入HBase的程序設(shè)計。b）數(shù)據(jù)處理部