網(wǎng)格環(huán)境下基于多數(shù)據(jù)源的數(shù)據(jù)傳輸.pdf

1、數(shù)據(jù)密集型的科學(xué)與工程應(yīng)用(如計(jì)算力學(xué)數(shù)值模擬、氣象預(yù)測(cè))需要在廣域、分布式的計(jì)算環(huán)境中快速安全的傳輸海量的數(shù)據(jù)。因此在如何網(wǎng)格環(huán)境中高效、可靠、安全的傳輸海量文件是網(wǎng)格計(jì)算中的一個(gè)關(guān)鍵性研究課題。 本文所構(gòu)建的網(wǎng)格環(huán)境下基于多數(shù)據(jù)源的數(shù)據(jù)傳輸工具M(jìn)FTP是MASSIVE(MultidisciplinaryApplications-OrientedSimulationandVisualizationEnvironment)網(wǎng)格平

2、臺(tái)的重要組成部分。MASSIVE旨在構(gòu)建面向多學(xué)科應(yīng)用的模擬與可視化網(wǎng)格環(huán)境。MASSIVE網(wǎng)格平臺(tái)處于工程應(yīng)用與網(wǎng)格中間件之間，為用戶提供一個(gè)圖形化的網(wǎng)格應(yīng)用集成開(kāi)發(fā)環(huán)境，它建立在GlobusToolkit中間件之上并支持基于網(wǎng)格的計(jì)算流體力學(xué)與計(jì)算固體力學(xué)問(wèn)題求解及可視化。 本文所論述的MFTP利用網(wǎng)格環(huán)境下存在的多個(gè)數(shù)據(jù)備份Replica，提出了一種基于Replica級(jí)別的并行傳輸方法以提高數(shù)據(jù)傳輸?shù)男阅?。它的流程如下：?/p>

3、戶輸入一個(gè)邏輯文件名，MFTP調(diào)用網(wǎng)格的復(fù)制定位服務(wù)(ReplicaLocationService，RLS)獲得文件所在的實(shí)際的物理存儲(chǔ)地址(physicallocations)；MFTP利用GridFTP提供的安全認(rèn)證，部分文件傳輸，并行傳輸開(kāi)始與用戶選定的Replica進(jìn)行安全認(rèn)證并創(chuàng)建一個(gè)或多個(gè)數(shù)據(jù)通道，按照Replica負(fù)載量算法決定各個(gè)Replica的數(shù)據(jù)傳輸量大小傳輸數(shù)據(jù)塊；最后MFTP根據(jù)各個(gè)數(shù)據(jù)塊的偏移地址重新合并文件。