3種分布式文件系統(tǒng)

1、第一部分CEPH1.1特點特點Ceph最大的特點是分布式的元數(shù)據(jù)服務(wù)器通過CRUSH，一種擬算法來分配文件的locaiton，其核心是RADOS（resilientautomaticdistributedobjectstage)，一個對象集群存儲，本身提供對象的高可用，錯誤檢測和修復(fù)功能。1.2組成組成CEPH文件系統(tǒng)有三個主要模塊：a)Client：每個Client實例向主機或進程提供一組類似于POSIX的接口。b)OSD簇：用于存儲

2、所有的數(shù)據(jù)和元數(shù)據(jù)。c)元數(shù)據(jù)服務(wù)簇：協(xié)調(diào)安全性、一致性與耦合性時，管理命名空間（文件名和目錄名）1.3架構(gòu)原理架構(gòu)原理Client：用戶IO：輸入輸出MDS：MetadataClusterServer元數(shù)據(jù)簇服務(wù)器OSD：ObjectStageDevice對象存儲設(shè)備傳統(tǒng)的，或者通常的并行文件系統(tǒng)，數(shù)據(jù)的定位的信息是保存在文件的metadata中的，也就是inode結(jié)構(gòu)中，通過到metadataserver上去獲取數(shù)據(jù)分布的信息。而在

3、Ceph中，是通過CRUSH這個算法來提供數(shù)據(jù)定位的。第二，元數(shù)據(jù)服務(wù)器可以提供集群metadataserver服務(wù)。只要當我們了解了其結(jié)構(gòu)后，感覺并沒有太大的特點。元數(shù)據(jù)服務(wù)器一般就用來存儲文件和目錄的信息，提供統(tǒng)一的命名服務(wù)。在Ceph中，元數(shù)據(jù)的inode，dentry，以及日志都是在對象存儲集群RADOS中存儲，這就使得metadata的持久化都是在遠程的RADOS中完成，metadataserver不保存狀態(tài)，只是緩存最近的i

4、node和dentry項，當metadataserver失效后，其所所有信息都可以從RADOS中獲取，可以比較容易恢復(fù)。CEPH最核心的，就是RADOS就是RADOS（resilientautomaticdistributedobjectstage).其resilient指的是可以輕松擴展，automatic指的是其對象存儲集群可以處理failover，failurerecovery。RADOS對象集群其對外提供了一個高可用的，可擴展的

5、，對象集群，從客戶端的角度看，就是一個統(tǒng)一命名空間的對象存儲。1.4使用方式使用方式(一)Ceph的Monit用來監(jiān)控集群中所有節(jié)點的狀態(tài)信息，完成類似配置服務(wù)的功能。在Ceph里，配置主要就是clustermap，其保存集群所有節(jié)點信息，并和所有的節(jié)點保持心跳，來監(jiān)控所有的節(jié)點狀態(tài)。其通過Paxos算法實現(xiàn)實現(xiàn)自身的高可用，也就是說，這個CephMonit是不會有單點問題的。目前流行的zookeeper的功能，以及實現(xiàn)都類似。(二)對

6、象存儲Ceph文件系統(tǒng)中的數(shù)據(jù)和元數(shù)據(jù)都保存在對象中。對于對象存儲，通常的定義是：一個Object，由三部分組成（id，metadata，data），id是對象的標識，這個不必多說。所謂的metadata，就是keyvalue的鍵值存儲，至于用來保存什么信息，由文件系統(tǒng)的語義定義。data就是實際存儲的數(shù)據(jù)。Ceph的對象，包括四個部分（id，metadata，attribute，data），在Ceph里，一個Object，實際就對應(yīng)本