HDFS架構
一.主從結構
1、主節點:只有一個,爲NameNode
2、從節點:有很多個,爲DateNode
NameNode負責:
①負責接收用戶的請求。
②維護文件系統的目錄結構。
③管理文件與block以及block與datanode之間的關係。
TaskNode負責:
①存儲文件。
②將文件分成很多block存儲在在磁盤上。
③爲了保證數據安全,文件有很多副本。
MapReduce架構
一.主從結構
1.主節點:只有一個,爲JobTracker
2.從節點:有很多個,爲TaskTracker
JobTracker負責:
①接收客戶的計算任務。
②把計算任務分配給TaskTracker執行。
③監控TaskTracker的執行情況。
TaskTracker負責:執行JobTracker分配的計算任務