HDFS常用的文件操作命令

文件操作

查看文件命令
ls 命令

# 查看hdfs根目录
hdfs dfs -ls /

# 查看hdfs其它目录(/user/zhang)
hdfs dfs -ls /user/zhang
1
2
3
4
5
du 命令

hdfs dfs -du /user/zhang

# 将字节自动转化成单位
hdfs dfs -du -h /user/zhang
1
2
3
4
df 命令

# 查看根目录磁盘空间
hdfs dfs -df /
1
2
复制文件和获取文件命令
put 命令

# 将client node中的NOTICE.txt文件 put 到hdfs的/user/zhang文件夹中
hdfs dfs -put NOTICE.txt /user/zhang

# 如果文件存在，可以使用-f参数进行覆盖
hdfs dfs -put -f NOTICE.txt /user/zhang
1
2
3
4
5
get 命令

# 获取hdfs中的/user/zhang/test/README.txt.gz文件，到client node当前目录

hdfs dfs -get /user/zhang/test/README.txt.gz

和copyToLocal命令一样
1
2
3
4
5
copyFromLocal 命令

# 这个命令和put作用相同
hdfs dfs -copyFromLocal LICENSE.txt /user/zhang

如果存在LCENSE.txt文件，要进行覆盖，加上-f参数，和put命令一样
1
2
3
4
copyToLocal 命令

# 复制hdfs的/user/zhang/test/README.txt文件到client node当前目录
hdfs dfs -copyToLocal /user/zhang/test/README.txt


# 如果需要复制到指定目录
hdfs dfs -copyToLocal /user/zhang/test/README.txt /指定目录
1
2
3
4
5
6
cp 命令

# 将/user/zhang/NOTICE.txt 复制到 /user/zhang/test目录
hdfs dfs -cp /user/zhang/NOTICE.txt /user/zhang/test
1
2
创建文件夹
mkdir命令

# 创建一个abc目录
hdfs dfs -mkdir /user/zhang/abc
1
2
删除文件命令
rm命令

# 删除/user/zhang/NOTICE.txt文件
hdfs dfs -rm /user/zhang/NOTICE.txt

# 删除/user/zhang/abc目录
hdfs dfs -rm -r /user/zhang/abc
1
2
3
4
5
rmdir 命令

# 删除/user/zhang/demo目录
hdfs dfs rmdir /user/zhang/demo
1
2
查看文件命令
cat 命令

# 查看文件

hdfs dfs -cat /user/zhang/test/README.txt
1
2
3
tail 命令

hdfs dfs -tail /user/zhang/test/README.txt
1
移动文件命令
moveFromLocal 命令

同copyFromLocal命令

moveToLocal 命令

同copyToLocal命令

mv 命令

同cp命令

mv 重命名

hdfs dfs -mv /user/zhang/test /user/zhang/test2
---------------------
【转载，仅作分享，侵删】
作者：张行之
来源：CSDN
原文：https://blog.csdn.net/qq_33689414/article/details/79651342
版权声明：本文为博主原创文章，转载请附上博文链接！

奈斯，感谢分享