Azkaban實戰-Mapreduce任務

mapreduce任務依然可以使用azkaban進行調度

1.創建job描述文件，及mr程序jar包

vi mapreduce.job

添加內容：

#mapreduce job
type=command
command=/opt/module/hadoop-2.8.4/bin/hadoop jar /opt/module/hadoop-2.8.4/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.8.4.jar wordcount /wordcount/input /wordcount/output

2.將所有job資源文件打到一個zip包中

zip mapreduce.zip mapreduce.job 

adding: mapreduce.job (deflated 43%)

3.在azkaban的web管理界面創建工程並上傳zip包

4.啓動job

5.查看結果