查看數據
hadoop fs -ls /tmp/wangchenlong/action_time
數據:2017-02-02 至 2017-02-28;2017-08-01 至 2017-08-24;即2月與8月數據;缺少1月數據;而1月數據被Hive轉移至:
hadoop fs -ls /warehouse/action_time/
移動文件:
hadoop fs -mv /warehouse/action_time/user_id_* /tmp/wangchenlong/action_time/
轉移全部1月數據,至/tmp/wangchenlong/action_time
;
查看日誌文件
hadoop fs -ls /logs/django/
全部gz文件都已經提取完成用戶時間,剩餘日誌:3月、4月、5月;
剩餘工作:執行lzma日誌,調研中,默認MR作業不支持lzma格式。