Azkaban工作流調度器
在Hadoop領域常用的工作流調度系統
Oozie,Azkaban,Cascading,Hamake等等。
性能對比:
安裝:
創建ssl配置
keytool -keystore keystore -alias jetty -genkey -keyalg RSA
生成密鑰
講keystore拷到server下
統一時區
這時要同步集羣時間。
修改server配置文件: azkaban.propreties
修改excuter配置文件
啓動:
web服務
azkaban-web-start.sh
後臺
nohup bin/azkaban-web-start.sh 日誌:1>tmp/azstd.out 2>/tmp/azerr.ou
頁面效果:
創建一個項目,然後寫個腳本測試下。
寫完打壓縮包,zip的,然後上傳運行
這裏可以運行多個job竄連任務,hdfs任務,hive建表任務,mr等等都可以,所以說azbkaban是一個工作流程調度器