用戶時間數據的檢查

查看數據

hadoop fs -ls /tmp/wangchenlong/action_time

數據:2017-02-02 至 2017-02-28;2017-08-01 至 2017-08-24;即2月與8月數據;缺少1月數據;而1月數據被Hive轉移至:

hadoop fs -ls /warehouse/action_time/

移動文件:

hadoop fs -mv /warehouse/action_time/user_id_* /tmp/wangchenlong/action_time/

轉移全部1月數據,至/tmp/wangchenlong/action_time

查看日誌文件

hadoop fs -ls /logs/django/

全部gz文件都已經提取完成用戶時間,剩餘日誌:3月、4月、5月;

剩餘工作:執行lzma日誌,調研中,默認MR作業不支持lzma格式。

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章