HDFS(二)命令

試著忘記壹切 提交于 2019-12-25 03:56:21

HDFS(二)命令

一、常见命令

命令 说明
hadoop fs -mkdir /park 在hdfs 的根目录下,创建 park目录
hadoop fs -ls / 查看hdfs根目录下有哪些目录
hadoop fs -put /root/1.txt /park 将linux操作系统root目录下的1.txt放在hdfs的park目录下
hadoop fs -get /park/jdk /home 把hdfs文件系统下park目录的文件下载到linux的home目录下
hadoop fs -rm /park/文件名 删除hdfs 的park目录的指定文件
hadoop fs -rmdir /park 删除park目录,但是前提目录里没有文件
hadoop fs -rmr /park 删除park目录,即使目录里有文件
hadoop fs -cat /park/a.txt 查看park目录下的a.txt文件
hadoop fs -tail /park/a.txt 查看park目录下a.txt文件末尾的数据
haddop jar xxx.jar 执行jar包
hadoop fs -cat /park/result/part-r-00000 查看 /park/result/part-r-00000文件的内容
hadoop fs –mv /park02 /park01 将HDFS上的park02目录重名为park01命令。
hadoop fs -mv /park02/1.txt /park01 将park02目录下的1.txt移动到/park01目录下
hadoop fs -touchz /park/2.txt 创建一个空文件
hadoop fs -getmerge /park /root/tmp 将park目录下的所有文件合并成一个文件,并下载到linux的root目录下的tmp目录
hadoop dfsadmin -safemode leave 离开hadoop安全模式
hadoop dfsadmin -safemode enter 进入安全模式
hadoop dfsadmin -rollEdits 手动执行fsimage文件和Edis文件合并元数据
hadoop dfsadmin -report 查看存活的datanode节点信息
hadoop fsck /park 汇报/park目录 健康状况
hadoop fsck /park/1.txt -files -blocks -locations -racks 查看1.txt 这个文件block信息以及机架信息
hadoop fs -expunge 手动清空hdfs回收站

二、其他命令

命令 说明
hadoop fs -cp /park01/1.txt /park02 将HDFS上 /park01下的1.txt拷贝一份到 /park02目录下。目标路径可以有多个,用空格隔开,比如:hadoop fs -cp /park01/1.txt /park02 /park03……
hadoop fs -du /park/1.txt 查看HDFS上某个文件的大小。也可以查看指定目录,如果是目录的话,则列出目录下所有的文件及其大小,比如:hadoop fs -du /park
hadoop fs -copyFromLocal /home/1.txt /park01 将本地文件1.txt上传到/park01目录下
hadoop fs -copyToLocal /park01/1.txt /home 将HDFS上的1.txt 拷贝到本地文件系统
hadoop fs -lsr / 递归查看指定目录下的所有内容
易学教程内所有资源均来自网络或用户发布的内容,如有违反法律规定的内容欢迎反馈
该文章没有解决你所遇到的问题?点击提问,说说你的问题,让更多的人一起探讨吧!