[Nutch]Hadoop多机完全分布式模式主机配置

Posted kandy_ye

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了[Nutch]Hadoop多机完全分布式模式主机配置相关的知识,希望对你有一定的参考价值。

在上一篇博文中我们有介绍hadoop的单机伪分布式模式的使用,那么现在我们就来看下多机完全分布式模式。

1. 多主机配置

1.1 对多台机器进行主机名设置

用root账户使用如下命令:

vim /etc/hostname

分别对三台机器设置为:host1、host2、host3
这里写图片描述

1.2 配置主机映射

用root账户使用如下命令:

vim /etc/hosts

分别配置三台机器:
host1:
这里写图片描述

host2:
这里写图片描述

host3:
这里写图片描述

2. 配置ssh

2.1 产生密钥

使用如下命令:

ssh-keygen -t rsa

其他设置都使用默认值,不设置密码,如下:
这里写图片描述

2.2 复制密钥

使用如下命令:

cp  .ssh/id_rsa.pub  .ssh/authorized_keys

2.3 验证

输入如下命令:

ssh localhost

如下:
这里写图片描述

输入如下命令:

ssh host1

如下:
这里写图片描述

3. 将公钥赋值到其他主机中,实现无密码登录

使用如下命令:

ssh-copy-id  -i  .ssh/id_rsa.pub  hadoop@host2
ssh-copy-id  -i  .ssh/id_rsa.pub  hadoop@host3

如下:
这里写图片描述

以上是关于[Nutch]Hadoop多机完全分布式模式主机配置的主要内容,如果未能解决你的问题,请参考以下文章

[Nutch]Hadoop单机伪分布式模式的使用(deploy)

[Nutch]Hadoop单机伪分布模式的配置

如何在以伪分布式模式安装的Hadoop中运行Nutch

[Nutch]Hadoop单机伪分布式模式的使用(deploy)

[Nutch]Hadoop单机伪分布式模式的使用(deploy)

hadoop_完全分布式配置