HDFS的常用命令有哪些

既然HDFS是存取数据的分布式文件系统，那么对HDFS的操作，就是文件系统的基本操作，比如文件的创建、修改、删除、修改权限等，文件夹的创建、删除、重命名等。对HDFS的操作命令类似于Linux的shell对文件的操作，如ls、mkdir、rm等。

一、基本操作

1、创建目录

hadoop fs -mkdir /hdfs #在根目录下创建hdfs文件夹

2、查看目录

>hadoop fs -ls / #列出跟目录下的文件列表drwxr-xr-x   - root supergroup          0 2016-03-05 00:06 /hdfs

3、级联创建目录

>hadoop fs -mkdir -p /hdfs/d1/d2

4、级联列出目录

>hadoop fs -ls -R /drwxr-xr-x   - root supergroup          0 2016-03-05 00:10 /hdfsdrwxr-xr-x   - root supergroup          0 2016-03-05 00:10 /hdfs/d1drwxr-xr-x   - root supergroup          0 2016-03-05 00:10 /hdfs/d1/d2

5、上传本地文件到HDFS

>echo "hello hdfs" >>local.txt>hadoop fs -put local.txt /hdfs/d1/d2

6、查看HDFS中文件的内容

>hadoop fs -cat /hdfs/d1/d2/local.txthello hdfs

7、下载hdfs上文件的内容

>hadoop fs -get /hdfs/d1/d2/local.txt

8、删除hdfs文件

>hadoop fs -rm /hdfs/d1/d2/local.txtDeleted /hdfs/d1/d2/local.txt

9、删除hdfs中目录

>hadoop fs -rmdir /hdfs/d1/d2

10、修改文件的权限

>hadoop fs -ls /hdfsdrwxr-xr-x   - root supergroup          0 2016-03-05 00:21 /hdfs/d1 #注意文件的权限>hadoop fs -chmod 777 /hdfs/d1drwxrwxrwx   - root supergroup          0 2016-03-05 00:21 /hdfs/d1 #修改后

11、修改文件所属的用户

>hadoop fs -chown admin /hdfs/d1 #修改文件所属用户为admin>hadoop fs -ls /hdfsdrwxrwxrwx   - admin supergroup          0 2016-03-05 00:21 /hdfs/d1

12、修改文件的用户组

>hadoop fs -chgrp admin /hdfs/d1>hadoop fs -ls /hdfsdrwxrwxrwx   - admin admin          0 2016-03-05 00:21 /hdfs/d1

由于hdfs的操作的命令很多，我们目前就以上比较常见的操作进行讲解。

二、HDFS文件操作的所有命令

查看方式 hadoop fs

[root@iZ28csbxcf3Z ~]# hadoop fsUsage: hadoop fs [generic options][-appendToFile  ... ][-cat [-ignoreCrc]  ...][-checksum  ...][-chgrp [-R] GROUP PATH...][-chmod [-R]  PATH...][-chown [-R] [OWNER][:[GROUP]] PATH...][-copyFromLocal [-f] [-p] [-l]  ... ][-copyToLocal [-p] [-ignoreCrc] [-crc]  ... ][-count [-q] [-h]  ...][-cp [-f] [-p | -p[topax]]  ... ][-createSnapshot  []][-deleteSnapshot  ][-df [-h] [ ...]][-du [-s] [-h]  ...][-expunge][-get [-p] [-ignoreCrc] [-crc]  ... ][-getfacl [-R] ][-getfattr [-R] {-n name | -d} [-e en] ][-getmerge [-nl]  ][-help [cmd ...]][-ls [-d] [-h] [-R] [ ...]][-mkdir [-p]  ...][-moveFromLocal  ... ][-moveToLocal  ][-mv  ... ][-put [-f] [-p] [-l]  ... ][-renameSnapshot   ][-rm [-f] [-r|-R] [-skipTrash]  ...][-rmdir [--ignore-fail-on-non-empty]  ...][-setfacl [-R] [{-b|-k} {-m|-x } ]|[--set  ]][-setfattr {-n name [-v value] | -x name} ][-setrep [-R] [-w]   ...][-stat [format]  ...][-tail [-f] ][-test -[defsz] ][-text [-ignoreCrc]  ...][-touchz  ...][-usage [cmd ...]]