hadoop基本操作

Posted 2023-03-22

参考技术A 启动HDFS

通过可视化界面查看HDFS的运行情况

使用方法：

如果是文件，则按照如下格式返回文件信息：
文件名 <副本数> 文件大小 修改日期 修改时间 权限 用户ID 组ID
如果是目录，则返回它直接子文件的一个列表，就像在Unix中一样。目录返回列表的信息如下：
目录名 <dir> 修改日期 修改时间 权限 用户ID 组ID
示例：

返回值：
成功返回0，失败返回-1

使用方法：

将文件从源路径移动到目标路径。这个命令允许有多个源路径，此时目标路径必须是一个目录。不允许在不同的文件系统间移动文件。
示例：

返回值：

成功返回0，失败返回-1。

使用方法：

从本地文件系统中复制单个或多个源路径到目标文件系统。也支持从标准输入中读取输入写入目标文件系统。

返回值：

成功返回0，失败返回-1。

使用方法：

删除指定的文件。只删除非空目录和文件。请参考rmr命令了解递归删除。
示例：

返回值：

成功返回0，失败返回-1。

分布式文件系统的设计思路：

添加环境变量

保存退出后， 让.bash_profile立即生效

进入到解压后的hadoop目录 修改配置文件

集群

HADOOP之HDFS环境搭建与基本操作

整理了HDFS的单机环境搭建、伪分布式搭建、完全分布式搭建

Linux搭建虚拟机以及克隆 

Linux更换阿里云镜像 

Hadoop大数据准备

HADOOP之HDFS环境搭建(一)

HADOOP之HDFS环境搭建(二) 

HADOOP之HDFS环境搭建(三)

HADOOP之HDFS环境搭建(四)  

HADOOP之HDFS用idea操作(五)