統計HDFS目錄下文件行數及文件大小

統計行數

hdfs dfs -cat /user/hive/warehouse/default/test_20190711_hdfs_to_mysql/* |wc –l

統計文件大小

hdfs dfs -count /user/hive/warehouse/default/test_20190711_hdfs_to_mysql/*

 

統計文件夾下所有文件/文件夾的大小:

hdfs dfs -du -h /pathA/ 統計pathA下所有子文件夾/文件的大小

hdfs dfs -du -s -h /pathA/ 統計pathA文件夾的大小

-s:統計父目錄

-h:以M/G爲單位格式化

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章