安装单机Hadoop

Posted 2021-07-19 ~晚风微凉~

1.下载hadoop3.1.3
下载地址：https://archive.apache.org/dist/hadoop/common/hadoop-3.1.3/
2.进行安装

因为我下载在tmp/mozilla_hadoop0所以先进这个目录，再解压到/usr/local（上图最后一行命令）
然后将目录名称修改为hadoop
sudo chown -R hadoop ./hadoop
修改目录权限
上图，1为修改目录权限，2为查看hadoop的版本信息
3运行grep实例来检测hadoop是否安装成功
1.新建目录，存放数据
cd /usr/local/hadoop
mkdir input
2.cp ./etc/hadoop/.xml ./input
3.执行如下代码运行grep实例
./bin/hadoop jar/usr/local/hadoop/share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar grep ./input ./output ‘dfs[a-z.]+’
执行下面的命令查看输出数据
cat ./output/
4.第三步得到的运行结果为
1.dfsadmin
1.dfs.replication
1.dfs.namenode.name.dir
1.dfs.datanode.data.dir