hdfs命令查找文件所在路径,hdfs获取路径下所有文件

hdfs命令查找文件所在路径,hdfs获取路径下所有文件

hdfs_path //将路径指定的文件内容输出到stdout hadoop fs -tail hdfs_path //将文件尾部1k字节的内容输出到stdout hadoop fs -stat hdfs_path //返回指定路径的统计信息h通过"FileSystem.getFileBlockLocation(FileStatus file,long start,long len)"可查找指定文件在HDFS集群上的位置，其中file为文件的完整路径，start和len来标识查找文件的路径

一、hdfs 查找文件命令

˙＾˙ (1)查看文件夹下的文件目录：hdfs dfs -ls hdfs dfs -ls # 列出工作主目录下的信息hdfs dfs -ls/# 列出hdfs文件系统中hdfs dfs -ls/data/output# 列示/data/3. HDFS常用命令(1)查看文件夹下的文件目录：hdfs dfs -ls hdfs dfs -ls # 列出工作主目录下的信息hdfs dfs -ls / # 列出hdfs文件系统中hdfs dfs -ls /data/output # 列示/data/ou

二、hdfs 查看路径

b.复制{/tmp/hadoop-hyxy/dfs/name}至{/home/hyxy/tmp/hadoop/dfs}的路径下，问题解决。2.查看系统日志{$HADOOP_HOME/logs}: 如果服务没起来，可以查看日志文件HDFS中查看文件所在位置的命令Usage: DFSck [-move | -delete | -openforwrite] [-files [-blocks [-locations | -racks]]]start checking from this path-move move corrupt

三、hdfs查看当前路径

查看1.txt 这个文件block信息以及机架信息hadoop fs -expunge 手动清空hdfs回收站其他命令命令解释hadoop fs -cp /park01/1.txt /park02 将HDFS上/park0上传文件hdfs dfs -put /本地路径/路径1 正则匹配OriginalFilePath目录下的文件(夹),批量上传到hdfs的targetFilePath目录下。其中-E表示告诉grep后面是一个

四、查看hdfs根目录下的文件的命令

╯▂╰ 格式：hadoop fs -命令主要有如下的命令：命令说明hadoop fs -mkdir 创建HDFS目录hadoop fs -ls 列出HDFS目录hadoop fs -copyFromLocal 使用-copyFromLocal复制本地文件(1.hdfs dfs -ls path 查看文件列表2.hdfs dfs -lsr path 递归查看文件列表3.hdfs dfs -du path 查看path下的磁盘情况，单位字节使用示例1.hdfs dfs -ls / 查看当前目录2