集群監(jiān)控中的數(shù)據(jù)采集技術研究.pdf

1、當前集群系統(tǒng)已經(jīng)成為高性能計算機體系結構發(fā)展的趨勢，但在實際中應用集群系統(tǒng)時為便于對集群進行管理維護，需要能對構成集群的各個結點以及相關設備的狀態(tài)進行實時監(jiān)控。因此研究集群監(jiān)控中的數(shù)據(jù)采集技術并設計一個監(jiān)控系統(tǒng)對集群技術的發(fā)展和應用具有重要的現(xiàn)實意義。 以Lustre存儲集群為背景，對存儲集群環(huán)境下的遠程監(jiān)控技術進行了分析，并在此基礎上實現(xiàn)了一個針對Lustre存儲集群的監(jiān)控系統(tǒng)原型ClusterMonitor。ClusterM

2、onitor集群監(jiān)控系統(tǒng)基于CIM/WBEM（Common Information Model/Web Based Enterprise Management）架構，由節(jié)點駐留程序MonDaemon，監(jiān)控服務端程序MonServer，遠程用戶程序MonGui三個部分組成。對CIM/WBEM架構的遵循使得ClusterMonitor具有良好的可擴展性，而且不再依賴于傳統(tǒng)的數(shù)據(jù)庫。 監(jiān)控數(shù)據(jù)采集包括監(jiān)控數(shù)據(jù)的獲取和監(jiān)控數(shù)據(jù)的匯集。監(jiān)

3、控數(shù)據(jù)獲取方面，設計了一個基于Linux內(nèi)核模塊的內(nèi)核態(tài)監(jiān)控數(shù)據(jù)獲取方案，可以通過一個統(tǒng)一接口獲取所有監(jiān)控數(shù)據(jù)，并且不需要解析文本文件；監(jiān)控數(shù)據(jù)匯集方面，為適應大規(guī)模集群監(jiān)控的需要，設計了一個二叉樹自收斂的監(jiān)控數(shù)據(jù)匯集協(xié)議，采用這種協(xié)議節(jié)點能自動發(fā)現(xiàn)數(shù)據(jù)匯集代理并產(chǎn)生優(yōu)化的匯集路徑。 通過實驗以對內(nèi)存信息的獲取為例驗證了內(nèi)核態(tài)監(jiān)控數(shù)據(jù)獲取方案的可行性，對二叉樹自收斂匯集協(xié)議的定量分析表明了將該匯集協(xié)議應用于大規(guī)模的集群監(jiān)控時將具