常见hdfs操作

Posted 2022-12-04 Lee_Sung

常见的HDFS操作命令

Hadoop版本2.6.0，命令均在Hadoop-2.6.0/bin目录下操作

1、创建目录命令

格式：hadoop fs -mkdir [目录名]
Eg.：hadoop fs -mkdir /input #在根目录下建立名为input的目录

2、上传文件命令

put命令从本地文件系统中复制单个或多个源路径到目标文件系统，也支持从标准输入设备中读取输入并写入目标文件系统。分为本地上传和上传到HDFS中。

格式：hadoop fs -put [文件名]
Eg.：hadoop fs -put test.txt /input      #将文件test.txt上传到hdfs的/input目录下

3、从HDFS获得文件

通过“-get 文件按1 文件2”命令将HDFS中某目录下的文件复制到本地系统的某文件中，并对该文件重新命名。

格式：hadoop fs -get [文件名] [新文件名]
Eg.：hadoop fs -get /input/test.txt ~/test1.txt     #将hdfs上input目录下的test.txt文件拿到本地家目录下，并改名为test1.txt

4、删除HDFS下的文档

格式：hadoop fs -rmr [文件]
Eg.：hadoop fs -rmr /input/test.txt