高性能計(jì)算環(huán)境下的數(shù)據(jù)管理和傳輸服務(wù)研究.pdf

1、隨著科學(xué)技術(shù)的發(fā)展，對(duì)高性能計(jì)算的要求也越來越高。網(wǎng)格的出現(xiàn)，使地理上廣域分布的各種資源包括計(jì)算資源和數(shù)據(jù)資源能夠組織在一個(gè)統(tǒng)一的框架下共享使用。如何在網(wǎng)格環(huán)境中高效地傳輸海量數(shù)據(jù)，是網(wǎng)格計(jì)算中的一個(gè)重要問題。 網(wǎng)格數(shù)據(jù)管理環(huán)境不僅必須提供安全的數(shù)據(jù)服務(wù)，還應(yīng)提供海量數(shù)據(jù)的分布式存儲(chǔ)管理、數(shù)據(jù)聚集、傳輸服務(wù)、熱點(diǎn)數(shù)據(jù)備份的副本管理以及安全、高速的數(shù)據(jù)傳輸服務(wù)。對(duì)于一些海量數(shù)據(jù)，我們希望能夠方便、快捷地把數(shù)據(jù)傳到指定的處理機(jī)上，盡

2、量減少傳輸時(shí)間。而同時(shí)，我們也需要對(duì)一些處于熱點(diǎn)狀態(tài)的數(shù)據(jù)進(jìn)行多處理機(jī)備份，即對(duì)數(shù)據(jù)進(jìn)行副本管理。 通過對(duì)網(wǎng)格結(jié)構(gòu)的分析與研究，本文著重關(guān)注于高性能計(jì)算環(huán)境下的數(shù)據(jù)管理和傳輸服務(wù)，基于GlobusToolkit的工具包和支持網(wǎng)格安全體系結(jié)構(gòu)及機(jī)制的文件傳輸協(xié)議GridFTP，設(shè)計(jì)并實(shí)現(xiàn)了網(wǎng)格數(shù)據(jù)傳輸服務(wù)圖形化集成平臺(tái)(GridDT)，可提供網(wǎng)格環(huán)境下的文件上傳、下載、并行方式數(shù)據(jù)傳輸、第三方控制數(shù)據(jù)傳輸，在此基礎(chǔ)上對(duì)圖形化方式與