【大數據畢設環境配置六】-搭建基於hadoop2.7的高可用(HA)完全分佈式集羣

效果展示:

  • 一臺50070主節點:在這裏插入圖片描述
  • 8088端口

在這裏插入圖片描述高可用說明

  • 至少兩個主節點,一個掛掉之後,另外一個仍能夠繼續工作
  • 將yarn 資源管理權交給一個從節點
  • 基本情況如下:
    在這裏插入圖片描述
    安裝重要說明:
  • 環境變量(略)
  • 配置五個重要的文件(注意對應你的主機名字,直接分享出來,就不貼代碼了,網上很多,需要的直接用SCP上傳即可)
    密碼: wbvm
  • 格式化之前需要啓動journalnode
 hadoop-daemons.sh start journalnode 
  • 格式化 hdfs namenode -format
  • 格式化完之後將/usr/local/tmp scp傳到node1
  • 格式化ZK
hdfs zkfc -formatZK

注意:如果遇到8485端口問題,需要到你的服務器安全組那裏打開對應的端口

  • 在master的sbin/裏面啓動start-dfs.sh,dfs服務就會啓動,node2的sbin/啓動start-yarn.sh必須這樣啓動

參考:

  • https://article.itxueyuan.com/1n29A
  • https://blog.csdn.net/qq_41851454/article/details/79666066
  • 那個(HA)表格來自參考連接,感覺很能說明問題,拿來一用下,如有侵權及時私信我。
發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章