VM搭建Hadoop环境遇到的问题

Posted 2020-10-12 那山的狐狸

原文链接：https://www.toutiao.com/i6482644128860471822/

一、Slave2中sshd服务一直处于启动失败状态

查看配置文件

c

发现配置文件末尾slave2和master不同，更改过后问题解决，可以连接

 

二、启动Hadoop时，SSH免密验证失败

查看日志信息，每次日志均卡在这个位置

查询发现master中 datanode一直未启动

因为在执行./start-dfs.sh中，手动输入过一次密码，猜测免密登录配置错误

回忆配置过程：

切换到hadoop角色后，进入/root/.ssh目录，发现权限不够

所以采用在root角色下进行免密配置

最终可以实现ssh hadoop@slave1免密登录，但是在hadoop启动的时候仍然需要密码登录，这就是错误原因。

忽略的问题，应该进入的是当前角色的ssh目录，即~/.ssh，所以拷贝的时候命令应该是：

错误：ssh-copy-id -i /root/.ssh/id_rsa.pub hadoop@slave1

正确：ssh-copy-id -i ~/.ssh/id_rsa.pub hadoop@slave1

重新执行./start-dfs.sh

浏览器访问启动成功