[Nutch]Hadoop多机完全分布式模式主机配置
Posted kandy_ye
tags:
篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了[Nutch]Hadoop多机完全分布式模式主机配置相关的知识,希望对你有一定的参考价值。
在上一篇博文中我们有介绍hadoop的单机伪分布式模式的使用,那么现在我们就来看下多机完全分布式模式。
1. 多主机配置
1.1 对多台机器进行主机名设置
用root账户使用如下命令:
vim /etc/hostname
分别对三台机器设置为:host1、host2、host3
1.2 配置主机映射
用root账户使用如下命令:
vim /etc/hosts
分别配置三台机器:
host1:
host2:
host3:
2. 配置ssh
2.1 产生密钥
使用如下命令:
ssh-keygen -t rsa
其他设置都使用默认值,不设置密码,如下:
2.2 复制密钥
使用如下命令:
cp .ssh/id_rsa.pub .ssh/authorized_keys
2.3 验证
输入如下命令:
ssh localhost
如下:
输入如下命令:
ssh host1
如下:
3. 将公钥赋值到其他主机中,实现无密码登录
使用如下命令:
ssh-copy-id -i .ssh/id_rsa.pub hadoop@host2
ssh-copy-id -i .ssh/id_rsa.pub hadoop@host3
如下:
以上是关于[Nutch]Hadoop多机完全分布式模式主机配置的主要内容,如果未能解决你的问题,请参考以下文章
[Nutch]Hadoop单机伪分布式模式的使用(deploy)
[Nutch]Hadoop单机伪分布式模式的使用(deploy)