基于CEPH分布式文件系統(tǒng)的云盤系統(tǒng)的設(shè)計與實現(xiàn).pdf

1、數(shù)據(jù)是當今互聯(lián)網(wǎng)時代最核心最具價值的產(chǎn)物之一，個人在消費和使用互聯(lián)網(wǎng)產(chǎn)品的同時產(chǎn)生了大量需要持久化存儲的數(shù)據(jù)，個體存儲設(shè)備的解決方式在這樣一個存儲量和存儲要求日益增長的條件下不再能夠滿足個人用戶的要求，因此越來越多的個人用戶成為了云存儲的受眾。云計算幾十年的發(fā)展使得公有云環(huán)境下的存儲技術(shù)已然十分成熟，商業(yè)環(huán)境下誕生了許多優(yōu)秀的云盤產(chǎn)品，但其核心技術(shù)是對外封閉的，而對于這種面向大量個人用戶的公有云盤系統(tǒng)，開源社區(qū)也并沒有完善可靠的整體解決

2、方案。
　　本文基于上述原因?qū)⒐性票P涉及的各個關(guān)鍵模塊和技術(shù)點進行逐個研究和設(shè)計，提出了一整套可靠的云盤系統(tǒng)實現(xiàn)架構(gòu)。首先對云盤的遠程文件系統(tǒng)操作機制的原理和技術(shù)進行了分析，研究并設(shè)計出CFSRPC協(xié)議，給出了協(xié)議的客戶端和服務端的具體格式定義和二者的通信機制，云盤系統(tǒng)通過對該協(xié)議的實現(xiàn)，可以透明化遠程文件操作的細節(jié)，方便客戶端和服務端上層業(yè)務的實現(xiàn)。與此同時為該協(xié)議設(shè)計了事務機制以顆?；募鬏敺?，設(shè)計了CSDA算法在協(xié)議級

3、別動態(tài)調(diào)節(jié)文件傳輸?shù)姆謮K大小，增加了該協(xié)議對云盤系統(tǒng)性能的優(yōu)化。
　　接著對云盤系統(tǒng)的核心業(yè)務流程進行分析，針對云盤系統(tǒng)依賴的多個關(guān)鍵模塊進行了分析和整合設(shè)計，總結(jié)出以訪問層、管理層、存儲層為核心的整體軟件架構(gòu)?；贑eph分布式文件系統(tǒng)設(shè)計核心存儲模塊，研究分析CephFS和MDS的實現(xiàn)原理并根據(jù)云盤系統(tǒng)架構(gòu)和CFSRPC協(xié)議的定義，結(jié)合多路IO復用機制設(shè)計實現(xiàn)了Ceph的接入模塊CCD。將云盤系統(tǒng)的請求分化為文件系統(tǒng)操作請求和