栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

HDFS常用命令总结

HDFS常用命令总结

1、命令格式

与linux命令类似,要用 “hadoop fs -” 开头。

2、创建文件夹

hadoop fs -mkdir 文件夹名 路径
其中若路径为空则默认在 /user/用户名/ 路径下操作

3、列出目录内容

hadoop fs -ls 路径

4、上传文件

hadoop fs -put 源路径文件(linux) 目的路径(hdfs)
注意
例如:hadoop fs -put t.txt /tmp/omcs/0228,若0228不为目录则会将t.txt文件保存为0228,其中t.txt为linux当前目录的文件(区分linux环境和hdfs环境)

5、下载文件

hadoop fs -get 源路径文件(hdfs) 目的路径(linux)

6、查看文件

hadoop fs -cat 文件名
hadoop fs -text 文件名
hadoop fs -tail 文件名 将文件尾部1K字节的内容输出到stdout

7、删除文件

hadoop fs -rm 文件名
-r 递归删除,用于删除文件夹

8、帮助文档

hadoop fs -help 命令
查看该命令的帮助文档,若命令为空会看所有命令的文档

9、查看HDFS状态

hadoop dfsadmin -report

10、改变文件权限

hadoop fs -chmod 777 文件名
-r 对目录递归

11、复制文件

hadoop fs -cp 源路径 目的路径

12、查看文件大小

hadoop fs -du 路径
-s 显示hdfs对应路径下所有文件和的大小
-h 显示hdfs对应路径下每个文件夹和文件的大小,文件的大小用方便阅读的形式表示,例如用64M代替67108864

13、移动文件

hadoop fs -mv 源路径 目的路径

14、设置副本数

hadoop fs -setrep 3 文件/目录
-r 对目录 递归

15、判断文件

hadoop fs -test -[ezd] URI
-e 检查文件是否存在。如果存在则返回0。
-z 检查文件是否是0字节。如果是则返回0。
-d 如果路径是个目录,则返回1,否则返回0。

16、创建空文件

hadoop fs -touchz URI

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/707774.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号