hdfs查看目录大小,hdfs文件夹大小

hdfs查看目录大小,hdfs文件夹大小

╯﹏╰ 显示目录中所有文件的大小，或者当只指定一个文件时，显示此文件的大小。示例：hadoop fs -du /user/hadoop/dir1 /user/hadoop/file1 hdfs://host:port/user/hahdfsdfs -du PATHTODIRECTORY | awk'/^[0-9]+/ { print int($1/(1024**3)) " [GB]\t"$2}' 要获取目录的大小，可以使用hdfs dfs -du -s -h / $ yourDirectoryName。hdfs dfsad

hdfs查看目录大小命令

＞ω＜ hdfs dfs -du -s -h /user/hive/warehouse/xy_ods.db/ods_test/pk_year=2021/pk_month=2021-12/pk_day=2021-12-30 如果需要截取前面的文件大小413.0G,还需要添du命令用来查看目录或文件所占用磁盘空间的大小。很明显，与df不同，它用来查看文件或目录所占用的磁盘空间的大小。文件或目录占用磁盘空间的大小与它们自身大小有时候并

hadoop查看目录大小

使用hdfs命令查看单个文件大小的最简单方法是使用“hdfs dfs -du”命令。该命令显示每个指定路径的文件或目录的大小，并以字节为单位输出。例如：hdfs dfs -du hdfs dfs -cat file查看文件file hdfs fs -text /dir/a.txt如果文件是文本格式，相当于cat,如果文件是压缩格式，则会先解压，再查看hdfs fs -tail /dir/a.txt查

hadoop查看hdfs目录

可以看到ods_table.db数据库下的表是最大的，具体是哪一张表呢，可以继续深入：[sunkangkang@fmidcslave01 scripts]$ ./analyze_hdfs_files.sh /user/hive/wareh1) 使用count参数查看查看查看/user下的目录数和文件数、文件大小：[root@quickstart process]# hdfs dfs -count -q -v user QUOTA REM_QUOTA SPACE_QUOTA R