Hadoop 三大运行模式--＞本地运行模式

Posted 2021-09-20 ZSYL

Hadoop 运行模式-->本地运行模式

• Hadoop 运行模式
• 本地运行模式

Hadoop 运行模式

1）Hadoop 官方网站：http://hadoop.apache.org/

2）Hadoop 运行模式包括：本地模式、伪分布式模式以及完全分布式模式。

• 本地模式：单机运行，只是用来演示一下官方案例。生产环境不用。
• 伪分布式模式：也是单机运行，但是具备 Hadoop 集群的所有功能，一台服务器模拟一个分布式的环境。个别缺钱的公司用来测试，生产环境不用。
• 完全分布式模式：多台服务器组成分布式环境。生产环境使用。

本地运行模式

官方 WordCount：

1）创建在 hadoop-3.1.3 文件下面创建一个 wcinput 文件夹

mkdir wcinput

2）在 wcinput 文件下创建一个 word.txt 文件

cd wcinput

3）编辑 word.txt 文件

vim word.txt

在文件中输入如下内容:

hadoop yarn
hadoop mapreduce

保存退出：:wq

4）回到 Hadoop 目录/opt/module/hadoop-3.1.3

5）执行程序

hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-3.1.3.jar wordcount wcinput wcoutput

6）查看结果

cat wcoutput/part-r-00000

看到如下结果：

hadoop 2
mapreduce 1
yarn 1

加油!

感谢!

努力!