Hadoop平臺(tái)中作業(yè)調(diào)度算法分析與改進(jìn)研究.pdf

1、目前云計(jì)算已經(jīng)成為流行的先進(jìn)技術(shù)模式，具有廣泛的應(yīng)用，在云計(jì)算的環(huán)境下，通過(guò)對(duì)作業(yè)任務(wù)進(jìn)行劃分使得各個(gè)節(jié)點(diǎn)中都有，這樣就可以實(shí)現(xiàn)作業(yè)任務(wù)的并行化處理，面對(duì)云計(jì)算中的海量作業(yè)任務(wù)如何進(jìn)行調(diào)度和處理成為云計(jì)算性能的重要指標(biāo)，如何保證云計(jì)算中的用戶任務(wù)作業(yè)得到有效的處理，使得用戶的服務(wù)質(zhì)量(QoS)得到充分的保證，為此，在本文中提出了基于用戶服務(wù)等級(jí)協(xié)議(SLA)的作業(yè)分級(jí)機(jī)制和基于QoS約束的多優(yōu)先級(jí)作業(yè)調(diào)度算法(QoS-MP Schedu

2、ler)，實(shí)現(xiàn)對(duì)云計(jì)算用戶服務(wù)質(zhì)量的保證。
　　針對(duì)傳統(tǒng)云計(jì)算作業(yè)調(diào)度中簡(jiǎn)單的優(yōu)先級(jí)設(shè)置的不足，在本文中首先對(duì)作業(yè)調(diào)度進(jìn)行研究提出基于用戶服務(wù)等級(jí)協(xié)議(SLA)的作業(yè)分級(jí)機(jī)制。在機(jī)制中規(guī)定用戶需要跟云服務(wù)商簽訂具有詳細(xì)指標(biāo)規(guī)定的服務(wù)等級(jí)協(xié)議，按照不同的等級(jí)對(duì)云用戶的作業(yè)進(jìn)行分類并將其存儲(chǔ)在作業(yè)分類器中，標(biāo)記云用戶的作業(yè)等級(jí)，保證較高等級(jí)作業(yè)得到優(yōu)先的處理;接著，設(shè)計(jì)基于QoS約束的多優(yōu)先級(jí)作業(yè)調(diào)度算法，在算法中利用云用戶作業(yè)中的偏

3、好程度來(lái)設(shè)計(jì)優(yōu)先級(jí)值計(jì)算函數(shù)Priority，在作業(yè)調(diào)度的時(shí)候可以對(duì)較高等級(jí)的云用戶和具有較高優(yōu)先級(jí)的作業(yè)得到任務(wù)的執(zhí)行，通過(guò)上述方式就可以較好的保證云計(jì)算環(huán)境下的服務(wù)質(zhì)量。
　　最后，對(duì)Hadoop平臺(tái)中作業(yè)調(diào)度算法進(jìn)行仿真實(shí)驗(yàn)，并對(duì)實(shí)驗(yàn)結(jié)果進(jìn)行分析。通過(guò)仿真實(shí)驗(yàn)，對(duì)于具有較高服務(wù)等級(jí)協(xié)議的云用戶可以得到優(yōu)先的任務(wù)安排和調(diào)度，基于QoS約束的多優(yōu)先級(jí)作業(yè)調(diào)度算法可以很好的實(shí)現(xiàn)在海量任務(wù)調(diào)度時(shí)保證云用戶的服務(wù)質(zhì)量，并且算法的平均作