分布式存儲系統(tǒng)設(shè)計與實現(xiàn).pdf

1、本篇論文表述的是設(shè)計和實現(xiàn)一個分布式存儲系統(tǒng)，Shamrock（三葉草）存儲系統(tǒng)，目標是為企業(yè)或網(wǎng)站提供大規(guī)模數(shù)據(jù)存儲的基礎(chǔ)性應(yīng)用。 該存儲系統(tǒng)的特點就是利用眾多廉價、不可靠的機器，作為存儲數(shù)據(jù)的數(shù)據(jù)節(jié)點，共同構(gòu)建一個可靠、容錯、容量巨大的存儲系統(tǒng)。整個存儲系統(tǒng)采用P2P思想來構(gòu)建，使用一個中心節(jié)點（NameNode）作為系統(tǒng)的中心，維護所有存儲數(shù)據(jù)的元信息，數(shù)量眾多的數(shù)據(jù)節(jié)點（DataNodes）專門用來存放數(shù)據(jù)。數(shù)據(jù)文件分拆

2、成數(shù)份固定大小的塊（Block），每個塊有3個副本，這3個副本分別存放到3個不同的數(shù)據(jù)節(jié)點上（DataNode）。副本機制既保證了系統(tǒng)的可靠性，也保證了系統(tǒng)的安全性。NameNode維護的信息包括文件名、Block信息和每個Block存放的DataNode上。數(shù)量眾多的數(shù)據(jù)節(jié)點集群在一起對外提供存儲服務(wù)，使得系統(tǒng)具有存儲P級數(shù)據(jù)能力。 應(yīng)用程序通過API訪問系統(tǒng)，Client與NameNode、DataNode通過遠程調(diào)用（RP