配置hadoop集群服务之一

Posted

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了配置hadoop集群服务之一相关的知识,希望对你有一定的参考价值。

1、首先配置主机名和各机器域名:

(1)Vim /etc/hostname

起名字:

机器编号

用途:(计算,sds,  master)

部门:chx

集团名称.com

例子:haoxintest1.master.chx.com

 

 

(2)vim /etc/hosts

作用:进行域名互通

ip+域名

10.10.67.122 haoxintest1.master.chx.com

10.10.67.123 haoxintest2.master.chx.com

10.10.67.124 haoxintest3.master.chx.com

 

(3)vim /etc/selinux/config

修改:SELINUX=disabled

 

4)重启机器:reboot

修改端口号:

vim /etc/ssh/ssh_config

vim /etc/ssh/sshd_config

 

2、根用户下,创建haoxin用户:

useradd haoxin

visudo:配置spark用户的sudo权限

 

visudo. 

配置sudo权限:

root下面配置

spark ALL=(ALL)  NOPASSWD:ALL

 

reboot 重启一下机器,使得haoxin用户能够本机获得sudo权限;

 

3、vim /etc/ssh/ssh_config

vim /etc/ssh/sshd_config

修改端口等信息,保持端口统一;

 

总结Tip

1、ip -a查寻服务器的ip和端口号;

2、wq!是作为强制保存的命令;

3、Reboot作为机器重设置,所有的端口号和ip设置完以后,需要reboot生效;

4、known_hosts是slave登陆master做的一个密钥存储记忆;

以上是关于配置hadoop集群服务之一的主要内容,如果未能解决你的问题,请参考以下文章

hadoop集群搭建在阿里云服务器上 云服务器配置要求是多少

配置hadoop集群服务之四-集群搭建

Hadoop集群及组件

大数据之一:Hadoop2.6.5+centos7.5三节点大数据集群部署搭建

大数据实战——hadoop集群组件启动及服务组件配置修改

4.Hadoop集群搭建之启动