2023年全國碩士研究生考試考研英語一試題真題(含答案詳解+作文范文)_第1頁
已閱讀1頁,還剩54頁未讀, 繼續(xù)免費(fèi)閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報(bào)或認(rèn)領(lǐng)

文檔簡介

1、隨著當(dāng)今互聯(lián)網(wǎng)環(huán)境中信息呈爆炸式的增長,人們對信息的存儲要求已經(jīng)變得越來越高。而大型互聯(lián)網(wǎng)公司內(nèi)部的分布式文件系統(tǒng)的集群規(guī)模更是急劇擴(kuò)張,存儲成本也在不斷上升。為了保證數(shù)據(jù)可靠性,現(xiàn)有分布式文件系統(tǒng)通常使用完全數(shù)據(jù)冗余的方法對文件進(jìn)行容錯(cuò),其中采用最多的方法為三副本備份方法。但是三副本備份方法給系統(tǒng)帶來了相當(dāng)大的空間消耗,存儲效率低下,所以針對分布式文件系統(tǒng)的存儲效率進(jìn)行優(yōu)化越來越成為研究中的熱點(diǎn)。
  糾刪碼技術(shù)通過對文件編碼生

2、成校驗(yàn)來達(dá)到容錯(cuò)目的,能夠極大地提升分布式文件系統(tǒng)的存儲效率。但是由于糾刪碼方法需要對文件進(jìn)行編碼解碼操作,并且在系統(tǒng)中僅保存了文件的一份副本,對系統(tǒng)性能帶來了影響。因此針對此問題,提出一種基于冷熱數(shù)據(jù)區(qū)分的混合存儲方案,在提高分布式文件系統(tǒng)存儲效率的同時(shí),將糾刪碼技術(shù)對系統(tǒng)性能的損耗降低到最小。
  所提出的方案結(jié)合了三副本備份方法和糾刪碼方法的優(yōu)點(diǎn),將新寫入的數(shù)據(jù)以三副本備份方法存儲,保證系統(tǒng)性能,當(dāng)數(shù)據(jù)變?yōu)槔鋽?shù)據(jù)時(shí),對文件進(jìn)

3、行編碼轉(zhuǎn)換,并減少副本數(shù),節(jié)約存儲空間。在編碼過程中系統(tǒng)參考了RAID(Redundant Array of Independent Disk)中“條帶化”的思想以一個(gè)條帶做為編碼單元。
  測試結(jié)果表明,此存儲效率優(yōu)化方案相對于三副本備份方法在存儲效率方面提升了約25%,并且此方案將糾刪碼技術(shù)所帶來的系統(tǒng)性能損耗由50%降低至5%以內(nèi),其性能表現(xiàn)與三副本備份方法基本一致。測試說明了基于冷熱數(shù)據(jù)區(qū)分的存儲效率優(yōu)化方案確實(shí)集合了多種

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論