原创 深度理解HDFS架構

深入理解HDFS架構 副本存放: 優化的副本存放策略是HDFS區分其他分佈式系統的重要特性。HDFS採用機架感知策略 來改進副本數據的可靠性,可用性,網絡帶寬的

原创 HDFS高可用環境搭建

HA(high availability) HA 使用的是分佈式日誌管理方式 1. 問題 Namenode出現問題,整個集羣將不能使用。 配置兩

原创 HDFS(分佈式文件系統)知識點梳理

HDFS hdfs是hadoop distributed filesystem的縮寫,是hadoop生態系統最爲重要的一

原创 HADOOP YARN(一)

HADOOP YARN是什麼? Yarn全稱是Yet Another Resource Negotiator(資源管理器) 基本概念 Container 容器是Yarn對資源的一層抽象。(CPU核數,內存等計算資源) 容器由