HDFS(分布式文件存储系统)--基本命令
目录
一、常见命令
| 命令 |
说明 |
| hadoop fs -mkdir /park |
在hdfs 的根目录下，创建 park目录 |
| hadoop fs -ls / |
查看hdfs根目录下有哪些目录 |
| hadoop fs -put /root/1.txt /park |
将linux操作系统root目录下的1.txt放在hdfs的park目录下 |
| hadoop fs -get /park/jdk /home |
把hdfs文件系统下park目录的文件下载到linux的home目录下 |
| hadoop fs -rm /park/文件名 |
删除hdfs 的park目录的指定文件 |
| hadoop fs -rmdir /park |
删除park目录，但是前提目录里没有文件 |
| hadoop fs -rmr /park |
删除park目录，即使目录里有文件 |
| hadoop fs -cat /park/a.txt |
查看park目录下的a.txt文件 |
| hadoop fs -tail /park/a.txt |
查看park目录下a.txt文件末尾的数据 |
| haddop jar xxx.jar |
执行jar包 |
| hadoop fs -cat /park/result/part-r-00000 |
查看 /park/result/part-r-00000文件的内容 |
| hadoop fs –mv /park02 /park01 |
将HDFS上的park02目录重名为park01命令。 |
| hadoop fs -mv /park02/1.txt /park01 |
将park02目录下的1.txt移动到/park01目录下 |
| hadoop fs -touchz /park/2.txt |
创建一个空文件 |
| hadoop fs -getmerge /park /root/tmp |
将park目录下的所有文件合并成一个文件，并下载到linux的root目录下的tmp目录 |
| hadoop dfsadmin -safemode leave |
离开hadoop安全模式 |
| hadoop dfsadmin -safemode enter |
进入安全模式 |
| hadoop dfsadmin -rollEdits |
手动执行fsimage文件和Edis文件合并元数据 |
| hadoop dfsadmin -report |
查看存活的datanode节点信息 |
| hadoop fsck /park |
汇报/park目录 健康状况 |
| hadoop fsck /park/1.txt -files -blocks -locations -racks |
查看1.txt 这个文件block信息以及机架信息
|
| hadoop fs -expunge |
手动清空hdfs回收站 |
二、其他命令
| 命令 |
说明 |
| hadoop fs -cp /park01/1.txt /park02 |
将HDFS上 /park01下的1.txt拷贝一份到 /park02目录下。 |
| hadoop fs -du /park/1.txt |
查看HDFS上某个文件的大小。也可以查看指定目录，如果是目录的话，则列出目录下所有的文件及其大小，比如：hadoop fs -du /park |
| hadoop fs -copyFromLocal /home/1.txt /park01 |
将本地文件1.txt上传到/park01目录下 |
| hadoop fs -copyToLocal /park01/1.txt /home |
将HDFS上的1.txt 拷贝到本地文件系统 |
| hadoop fs -lsr / |
递归查看指定目录下的所有内容 |