hadoop集羣測試jar包以及歷史命令

使用idea打jar包
1.在pom文件的下邊將 打包插件
在這裏插入圖片描述
2.然後impor 下載打jar包依賴
3.在以來中指定主類,包名,類名mrTest.dirver
4.點開idea右邊的maven project , 然後打開Lifecycle.
如果已經存在 tartget 文件夾,點擊clean清除
點擊complite 編譯
點擊package 打包
打包完後會生成兩個jar包
在這裏插入圖片描述
一個jar包是瘦jar包,jar包裏面只有類,代碼
一個jar包是胖jar包,jar包裏面不僅有代碼,還有依賴
什麼時候用胖jar包
在寫的項目中,用到了組件之外的jar包,就需要用胖jar包
測試jar包
前提條件:1.服務啓動完整
運行瘦jar包的命令 :jar 是在本地
hadoop jar /root/mr01-1.0-SNAPSHOT.jar jh.com.mapReduce.driver /Apache_Hadoop_Common_2.6.0.xml /a001
註釋:hadooo jar /root/jar包的名稱 包名類名 輸出文件 寫入文件
開啓歷史服務的命令: 一般 只要跑任務,這個服務都會開。
mr-jobhistory-daemon.sh start historyserver 可以查看報錯信息
注意:歷史服務,啓動之後,再跑的任務纔會有日誌。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章