網(wǎng)格中基于MapReduce應用的可視化系統(tǒng)的設計與實現(xiàn).pdf

1、隨著網(wǎng)格計算在高性能計算領域中變得越來越重要,網(wǎng)格應用也開始蓬勃發(fā)展。在Google提出并大力推廣MapReduce計算架構的時機,在網(wǎng)格環(huán)境中部署MapReduce應用可以提高網(wǎng)格的適用性。而隨著技術的普及,網(wǎng)格產(chǎn)品開始被普通的中小型用戶所廣泛認知以及接受。但是如何使用復雜艱深的以命令行為基礎的網(wǎng)格應用,一直是網(wǎng)格產(chǎn)品向大眾普及的一個瓶頸。為解決這個問題,在網(wǎng)格環(huán)境中將MapReduce應用進行可視化的需求也就應運而生了。
　　

2、為了將一個具有復雜結構的計算框架展示給用戶,本論文研究對比了現(xiàn)在流行的可視化界面框架之后,決定采用同時擁有強大組件庫和良好用戶體驗的自有商用界面框架CommonWidget。可視化系統(tǒng)的一個通病是其性能問題,本文為了減少后臺數(shù)據(jù)轉換到前臺界面所消耗的資源,使用JNI和Ajax等新興技術來提高整個系統(tǒng)的效率。將MapReduce應用和可視化系統(tǒng)手工部署到環(huán)境中去對普通用戶來說相當困難,本文在調(diào)研了網(wǎng)格應用的用戶群體之后,采用Linux下的

3、64位平臺作為部署環(huán)境,使用RPM打包技術幫助用戶一步到位的將整個MapReduce解決方案部署完成。
　　本論文將MapReduce應用的三種工作量Application、Job和Task的狀態(tài)和功能分層次的展示在可視化系統(tǒng)上,不僅包含了MapReduce應用應有的功能,還創(chuàng)建了適合用戶操作的個性化功能。另外本論文還設置了不同的界面訪問權限使不同性質的用戶專注于其功能點。MapReduce應用的可視化系統(tǒng)不僅能夠幫助用戶高效輕松