统计HDFS⽬录下⽂件⾏数及⽂件⼤⼩统计⾏数
hdfs dfs -cat /user/hive/warehouse/default/test_20190711_hdfs_to_mysql/* |wc -l
统计⽂件⼤⼩和数量
hdfs dfs -count /user/hive/warehouse/default/test_20190711_hdfs_to_mysql/*
返回值的第⼀列是⽂件夹的数量,第⼆列是⽂件数量,第三列是⽂件的⼤⼩,单位是byte。
统计⽂件夹下所有⽂件/⽂件夹的⼤⼩:
mysql下载下来是一个文件夹hdfs dfs -du -h /pathA/ 统计pathA下所有⼦⽂件夹/⽂件的⼤⼩
hdfs dfs -du -s -h /pathA/ 统计pathA⽂件夹的⼤⼩
-s:统计⽗⽬录
-h:以M/G为单位格式化
版权声明:本站内容均来自互联网,仅供演示用,请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198,我们将在24小时内删除。
发表评论