記一次使用sqoop從hive導入數據至mysql

背景是將hive app應用層的數據搬運至mysql中。在hue頁面的日誌中看不到詳細的日誌信息。

1、 對於提交了sqoop 命令行 \後面不能有空格。

2、導入錯誤時。需要去查看yarn日誌 historyJob日誌。
1、http://10.128.100.87:19888/jobhistory
2、根據jobID查看情況。
3、查看失敗的job 。
4、瞭解node和logs的信息。主要是點擊logs查看錯誤信息
5、Click here for the full log. 點擊here 。詳細查看內容
6、找到 Caused by: 報錯原因。
3、根據報錯,解決問題。

尤其都是對於一些數據庫字段長度不夠這樣的信息。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章