分布式數(shù)據(jù)采集與監(jiān)測系統(tǒng)的設(shè)計、實現(xiàn)及應(yīng)用.pdf

1、在計算機系統(tǒng)結(jié)構(gòu)和性能的研究過程中，數(shù)據(jù)采集和監(jiān)測系統(tǒng)一直都具有十分重要的作用，它能夠獲取軟硬件運行時所產(chǎn)生的可以反映系統(tǒng)性能、負載和效率等特征的大量數(shù)據(jù)，從而為現(xiàn)有系統(tǒng)的改進和新結(jié)構(gòu)的設(shè)計提供參考。當(dāng)前，以數(shù)據(jù)和計算中心為主體的集中式個人計算和存儲模式成為了新結(jié)構(gòu)研究中的熱點。在這種模式中，計算和存儲資源被集中放置在服務(wù)器端，用戶通過與服務(wù)器連接的瘦客戶端和虛擬化技術(shù)獲得獨立、安全的個人計算環(huán)境。集中模式試圖通過服務(wù)器端的大規(guī)模資源共

2、享來提高資源利用率從而降低成本，這給服務(wù)器的設(shè)計帶來了挑戰(zhàn)。而這種服務(wù)器的資源及負載實際上是現(xiàn)有大量個人資源和負載的某種聚合。因此，研究現(xiàn)有個人計算機上的資源使用、應(yīng)用和用戶行為等特征，可以為集中模式中服務(wù)器的設(shè)計提供量化的參考，這就需要對目前大量分布在網(wǎng)絡(luò)環(huán)境中的個人計算機上的數(shù)據(jù)進行長時期采集與監(jiān)測，并且，在此過程中采集和監(jiān)測的數(shù)據(jù)類型和人群也可能隨著研究的進行而發(fā)生動態(tài)變化。針對這些研究需求，本文設(shè)計并實現(xiàn)了一個動態(tài)可更新的分布式

3、數(shù)據(jù)采集與監(jiān)測系統(tǒng)，并對系統(tǒng)收集到的數(shù)據(jù)進行了全面的分析。 本文的主要工作和貢獻是： 1.分析了典型的分布式監(jiān)測系統(tǒng)的結(jié)構(gòu)和技術(shù)特點，針對集中模式研究的需求，討論了用于獲取網(wǎng)絡(luò)環(huán)境中個人計算機數(shù)據(jù)的采集和監(jiān)測系統(tǒng)設(shè)計中的關(guān)鍵問題。在總結(jié)和分析已有系統(tǒng)的基礎(chǔ)上，提出了一個動態(tài)可更新的分布式數(shù)據(jù)采集和監(jiān)測系統(tǒng)DDCS的體系結(jié)構(gòu)，這一結(jié)構(gòu)融入了數(shù)據(jù)采集模塊獨立化和監(jiān)測過程服務(wù)化的設(shè)計思想，并基于Manager／Agent模型，

4、很好的滿足了長期研究過程中采集數(shù)據(jù)類型動態(tài)變化的需求。 2.基于動態(tài)可更新的體系結(jié)構(gòu)，實現(xiàn)了分布式數(shù)據(jù)采集和監(jiān)測系統(tǒng)DDCS。DDCS通過動態(tài)更新協(xié)議實現(xiàn)了參數(shù)，數(shù)據(jù)采集器和系統(tǒng)三個級別的動態(tài)更新機制；它通過多種技術(shù)實現(xiàn)了系統(tǒng)的輕載性；DDCS還支持多層次和跨網(wǎng)域的數(shù)據(jù)采集和監(jiān)測，并一1ti臣過提供數(shù)據(jù)采集器開發(fā)包實現(xiàn)了系統(tǒng)的可擴展機制。 3.將DDCS在40臺個人辦公計算機上進行了部署實驗，收集到大量真實數(shù)據(jù)，通過從資