大數據各系統及組件的控制檯網址/啓動方式彙總

Hadoop

• 控制檯： http://master:8088/cluster
• 檢查運行狀態：jps
  • master: ResourceManager NameNode SecondaryNameNode
  • slave: NodeManager DataNode
• 啓動：
  • master: $HADOOP_HOME/sbin/start-all.sh

Hive

• 控制檯：無（shell終端）
• 檢查運行狀態：無
• 啓動：隨Hadoop啓動( hdfs+ yarn)

HBase

• 控制檯： http://master:60010/master-status
• 檢查運行狀態：jps
  • master: HMaster HRegionServer
  • slave: HRegionServer
• 啓動：
  • master: start-hbase.sh

Spark

• 控制檯：http://master:8080
• 檢查運行狀態：jps
  • master: Master
  • slave: Worker
• 啓動：
  • master: $SPARK_HOME/sbin/start-all.sh

Flume

• 無控制檯
• 檢查運行狀態：無
• 啓動:
  • 結合Kafka使用
  • bin/flume-ng agent --conf … 加上配置文件及參數啓動

Zookeeper

• 無控制檯
• 檢查運行狀態：1. zkServer.sh status
  2. jps
  - master: QuorumPeerMain
  - slave: QuorumPeerMain
• 啓動：
  • master: zkServer.sh start
  • slave: zkServer.sh start

Kafka

• 無控制檯

• 檢查運行狀態：jps

  • master: Kafka
  • slave: Kfaka

• 啓動：

  • master: start-kafka.sh
  • slave: start-kafka.sh

Storm

• 控制檯：http://master:8089/index.html
• 檢查運行狀態：jps
  • master: nimbus logviewer
  • slave: supervisor logviewer
• 啓動：
  • master: start-storm-master.sh
  • slave: start-storm-slave.sh

Flink

• 控制檯：http://master:8081/#/overview
• 檢查運行狀態：jps
  • master：JobManager
  • slave：TaskManager
• 啓動：
  • master：start-cluster.sh