1.1.1　HDFS體系結(jié)構(gòu)

HDFS是一個主/從（Master/Slave）體系結(jié)構(gòu)的分布式系統(tǒng)，如圖1-1所示，HDFS集群擁有一個Namenode和一些Datanode，用戶可以通過HDFS客戶端同Namenode和Datanodes交互以訪問文件系統(tǒng)。

圖1-1　HDFS體系結(jié)構(gòu)示意圖

在HDFS中，Namenode是HDFS的Master節(jié)點，負(fù)責(zé)管理文件系統(tǒng)的命名空間（namespace），以及數(shù)據(jù)塊到具體Datanode節(jié)點的映射等信息。集群中的Datanode一般是一個節(jié)點一個，負(fù)責(zé)管理它所在節(jié)點上的存儲。從內(nèi)部看，一個文件其實被分成一個或多個數(shù)據(jù)塊，這些塊存儲在一組Datanode上，Datanode會以本地文件的形式保存這些數(shù)據(jù)塊以及數(shù)據(jù)塊的校驗信息。

用戶能夠通過HDFS客戶端發(fā)起讀寫HDFS文件的請求，同時還能通過HDFS客戶端執(zhí)行文件系統(tǒng)的命名空間操作，比如打開、關(guān)閉、重命名文件或目錄。Namenode會響應(yīng)這些請求，更改命名空間以及數(shù)據(jù)塊的映射信息，然后指導(dǎo)Datanode處理文件HDFS客戶端的讀寫請求。