elasticsearch简单的安装以及集群配置详解

Posted shaozm

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了elasticsearch简单的安装以及集群配置详解相关的知识,希望对你有一定的参考价值。

首先要确保有java8的环境,安装方法如下(centos)

1  wget --no-check-certificate --no-cookies --header "Cookie: oraclelicense=accept-securebackup-cookie" http://download.oracle.com/otn-pub/java/jdk/8u161-b12/2f38c3b165be4555a1fa6e98c45e0808/jdk-8u161-linux-x64.rpm
2 npm -ivh  jdk-8u161-linux-x64.rpm

环境安装完毕,下载elesticsearch

1 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.5.2.zip

解压elasticsearch-5.5.2.zip

1 unzip elasticsearch-5.5.2.zip

如果没有unzip这个命令的话可以先运行

1 yum install unzip

elasticsearch不能直接用root账户运行,所以需要创建一个用户,而且需要将elasticsearch文件夹属主修改为新创建的这个用户,不然的话启动的时候会有一些权限引起的错误

因为这时候并不知道root的密码,所以先给root创建一个密码

 1 passwd root 

然后输入密码

接着创建用户并修改文件夹属主和属组

groupadd elasticsearch
useradd elasticsearch
passwd elasticsearch chown -R elasticsearch:elasticsearch elasticsearch

打开位于elasticsearch文件夹中/conifg目录下的 elasticsearch.yml配置文件修改配置

cluster.name: elas_cluster   集群的名字

node.name: node-q1   节点的名称

node.master: true
node.data: true

 配置文件中给出了三种配置高性能集群拓扑结构的模式,如下:

1. 如果你想让节点从不选举为主节点,只用来存储数据,可作为负载器

       node.master: false

      node.data: true

2. 如果想让节点成为主节点,且不存储任何数据,并保有空闲资源,可作为协调器

       node.master: true

       node.data: false

3. 如果想让节点既不称为主节点,又不成为数据节点,那么可将他作为搜索器,从节点中获取数据,生成搜索结果等

        node.master: false

       node.data: false

默认情况是两个都是true,如果没几台服务器的话就用默认的就可以了。

network.host: 192.168.0.1 绑定的ip,设置为0.0.0.0后可以用外网访问

network.publish_host: 192.168.0.1  指定elasticsearch节点对外的监听地址,就是外网地址,搭建集群的时候最好指定一下,否则可能集群没办法启动,默认应该是去监听内网地址的

node.attr.rack: r2  给节点添加额外属性,这个暂时没发现什么用处

path.data: /path/to/data    数据保存的目录
path.logs: /path/to/logs    日志保存的目录

bootstrap.memory_lock: true  禁止内存交换,最好设置为false,不然非常影响性能,如果因为这个启动的时候报错,可以去修改limits.conf,配置下面有说

http.port:9200     路由地址端口

transport.tcp.port:9300     TCP协议转发地址端口,像java使用这个端口去操作

注:ES默认的HTTP监听端口是9200,如果当前被占用,则在9200~9300范围内递增;另外TCP的默认监听端口是9300,如果当前被占用,则再9300~9400范围内递增。所以单机少量节点,不配置具体端口的话,也是可以运行的。

 

discovery.zen.ping.unicast.hosts: ["192.168.36.130", "192.168.36.132:9300"]      单播的地址,配置集群中其他节点的ip,新加入的节点通过这些ip同步到集群,这里的端口应该使用transport.tcp.port端口

discovery.zen.minimum_master_nodes: 2        master节点是选取出来的,一个集群只能有一个,以上node.master: true配置是说该节点具有被选举的权利,而现在这个配置就是告诉 Elasticsearch 当没有足够 master 候选节点的时候,就不要进行 master 节点选举,等 master 候选节点足够了才进行选举。(因为你是一台台去启动服务器的) 这样是为了防止集群中同时存在两个master,这个数值应该配置为 ( master 候选节点个数 / 2) + 1。所以要高可用的话至少三台以上有被选举权。

gateway.recover_after_nodes: 2  通俗来说就是等集群有几个节点启动起来了再来选举master,分配分片数据什么的,这里配得不好可能有的问题就是启动的时候可能会多耗点性能

index.number_of_shards: 5       设置索引的分片数,默认为5    分片的意思就是一整个索引文档,分成5个部分去保存

index.number_of_replicas: 1      设置索引的副本数,默认为1  1个副本相当于一个备份

 

配置一下

 1 vi /etc/security/limits.conf 
 
添加如下内容:
 *  soft nofile 65536
 * hard nofile 131072
 * soft nproc 2048
 * hard nproc 4096
 *  soft memlock unlimited
 * hard memlock unlimited
再敲个命令
 1 ulimit -l unlimited 
 
修改 /etc/sysctl.conf
文件末尾添加 vm.max_map_count=262144
 
报存后退出

 敲命令

sysctl -w vm.max_map_count=262144

 

一切就绪后启动

elasticsearch目录下bin中运行  ./elasticsearch

启动的时候发现报错,而且可能一次又一次,一次好几个错,错误这里就不说了,主要都是因为账户权限,内存线程什么引起的,网上的解决方法很多,贴几个链接

https://blog.csdn.net/gongpulin/article/details/78568595

https://blog.csdn.net/u013083576/article/details/78499884

 

单个成功访问ip地址加端口后,端口是http.port端口

技术分享图片

 

集群健康查看 ip加端口加上/_cluster/health

技术分享图片

 

 

   

 





以上是关于elasticsearch简单的安装以及集群配置详解的主要内容,如果未能解决你的问题,请参考以下文章

elasticsearch集群安装配置

配置 Elasticsearch 集群

elasticsearch安装配置

Elasticsearch配置文件kibana配置文件讲解以及集群配置

Elasticsearch搭建

Elasticsearch搭建