hdfs的上传与下载相关命令与用法

Posted yyyyyy555

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了hdfs的上传与下载相关命令与用法相关的知识,希望对你有一定的参考价值。

技术图片

 

上传文件:

  1. 启动集群

    cd /$HADOOP_HOME

    start-dfs.sh

    start-yarn.sh

    查看集群的运行状态

       http://192.168.56.110:50070/

    查看集群的目录结构

      http://192.168.56.110:50070/explorer.html#/

  2.从宿主机上传到本地机(master)【用xshell上传】

    方法一:Usage:hadoop  fs  - copyFromLocal 本地文件  /本地文件的路径

      Hadoop  fs  -copyFromLocal  word.txt  /user/root

    方法二:Usage:hadoop  fs  -put  /本地文件  /本地文件的路径/重命名的文件

      Hadoop  fs  -put  word.txt(本地文件)  /user/root(本地文件的路径)/重命名的文件

    方法三:Usage:hadoop  fs  - moveFromLocal /本地文件/本地文件的路径/重命名的文件

      Hadoop  fs  -moveFromLocal  word.txt  /user/root

 

下载文件:

1.

  方法一:Usage:hadoop  fs  - copyToLocal  /本地文件的路径/本地文件 .

    Hadoop  fs  -copyToLocal  /user/root/ word.txt  .(当前目录)

  方法二:Usage:hadoop  fs  -get   /本地文件的路径/本地文件 .

    Hadoop  fs  -get  /user/root(本地文件的路径)/ word.txt(本地文件)  .

查看内容:

  Hadoop  fs  -cat  /user/root/word.txt    /本地文件的路径/本地文件

  Hadoop  fs  -tail  pathname(查看的路径)

删除文件:

  Hadoop  fs  -rm  /user/root/word.txt    /本地文件的路径/本地文件

 

以上是关于hdfs的上传与下载相关命令与用法的主要内容,如果未能解决你的问题,请参考以下文章

头歌Educoder云计算与大数据——实验五 Java API分布式存储

Hadoop大数据技术-通过shell命令访问HDFS

Hadoop之压缩与存储

何时使用hadoop fs,hadoop dfs与hdfs dfs命令

何时使用hadoop fs,hadoop dfs与hdfs dfs命令

Linux中网卡相关命令以及SSH连接远程主机