hadoop核心框架簡介

HDFS架構

一.主從結構

   1、主節點:只有一個,爲NameNode

   2、從節點:有很多個,爲DateNode

   NameNode負責:

                 ①負責接收用戶的請求。

                 ②維護文件系統的目錄結構。

                 ③管理文件與block以及block與datanode之間的關係。

   TaskNode負責:

                 ①存儲文件。

                 ②將文件分成很多block存儲在在磁盤上。

                 ③爲了保證數據安全,文件有很多副本。

MapReduce架構

一.主從結構

   1.主節點:只有一個,爲JobTracker

   2.從節點:有很多個,爲TaskTracker

   JobTracker負責:

                   ①接收客戶的計算任務。

                   ②把計算任務分配給TaskTracker執行。

                   ③監控TaskTracker的執行情況。

   TaskTracker負責:執行JobTracker分配的計算任務








發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章