栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 前沿技术 > 大数据 > 大数据系统

ES-03-CentOS下ElasticSearch集群搭建

ES-03-CentOS下ElasticSearch集群搭建

说明

CentOS下ElasticSearch集群搭建集群搭建的一些准备工作是基于单节点安装,具体参照我的上一篇文章“CentOS下安装ElasticSearch”本案例以单服务器多端口模拟集群环境(由node-9201、node-9202、node-9203三个节点共同组成)ES集群正常工作至少需要3台服务节点。如果只有两台节点,当主节点挂掉后会导致另一台是无法被选举为主节点,最终导致整个集群停止服务。如果3台中两台宕机也会导致集群停止服务。

具体影响因素参考本文“其他配置”中的discovery.zen.minimum_master_nodes参数 官方文档:https://www.elastic.co/cn/ 操作步骤 》解压缩

安装包列表

[root@192 ES]# ll
total 311360
-rw-r--r--. 1 501 games 306436527 Jan 17 12:03 elasticsearch-7.9.3-linux-x86_64.tar.gz

解压缩到一个目录,比如:/usr/local/es/cluster/node-9201

确定已经添加了es用户

确定目录所属用户为es,如果不是,root身份执行以下命令

[root@192 ES]# chown -R es:es /usr/local/es/cluster/

接下来的操作切换为es用户

[root@192 ES]# su es

切换到该目录

[es@192 node-9201]$ pwd
/usr/local/es/cluster/node-9201
[es@192 node-9201]$ ll
total 568
drwxr-xr-x.  2 es es   4096 Jan 20 22:44 bin
drwxr-xr-x.  3 es es    169 Jan 20 22:44 config
drwxr-xr-x.  8 es es     96 Jan 20 22:44 jdk
drwxr-xr-x.  3 es es   4096 Jan 20 22:44 lib
-rw-r--r--.  1 es es  13675 Jan 20 22:44 LICENSE.txt
drwxr-xr-x.  2 es es      6 Jan 20 22:44 logs
drwxr-xr-x. 51 es es   4096 Jan 20 22:44 modules
-rw-r--r--.  1 es es 544318 Jan 20 22:44 NOTICE.txt
drwxr-xr-x.  2 es es      6 Jan 20 22:44 plugins
-rw-r--r--.  1 es es   7007 Jan 20 22:44 README.asciidoc
》修改配置

config/jvm.options

-Xms128m
-Xmx128m

config/elasticsearch.yml

# 集群名称
cluster.name: my-app

# 节点名称
node.name: node-9201

# 节点是否可作为master
node.master: true

# 节点是否数据节点
node.data: true

# host名称(可以是IP,也可以是hostname)
network.host: 192.168.3.201

# http端口
http.port: 9201

# 集群节点间通信端口
transport.port: 9301

# 集群初始化时可被选举master的节点
cluster.initial_master_nodes: ["node-9201", "node-9202", "node-9203"]

# 节点发现(可以是IP,也可以是hostname)
discovery.seed_hosts: ["192.168.3.201:9301", "192.168.3.201:9302", "192.168.3.201:9303"]

注意:此时修改好先不要启动,如果启动了,下一步复制文件夹时,新的文件夹中需要清空data文件夹和logs文件夹否则启动报错。

》克隆配置好的ES环境并更改端口等配置

将上一步配置好的文件夹“node-9201”整个复制两份,分别命名为“node-9202”、“node-9203”

[es@192 cluster]$ pwd
/usr/local/es/cluster
[es@192 cluster]$ ll
total 0
drwxr-xr-x. 10 es es 167 Jan 21 17:29 node-9201
drwxr-xr-x. 10 es es 167 Jan 21 17:30 node-9202
drwxr-xr-x. 10 es es 167 Jan 21 17:30 node-9203

修改配置:node-9202/config/elasticsearch.yml

# 集群名称
cluster.name: my-app

# 节点名称
node.name: node-9202

# 节点是否可作为master
node.master: true

# 节点是否数据节点
node.data: true

# host名称(可以是IP,也可以是hostname)
network.host: 192.168.3.201

# http端口
http.port: 9202

# 集群节点间通信端口
transport.port: 9302

# 集群初始化时可被选举master的节点
cluster.initial_master_nodes: ["node-9201", "node-9202", "node-9203"]

# 节点发现(可以是IP,也可以是hostname)
discovery.seed_hosts: ["192.168.3.201:9301", "192.168.3.201:9302", "192.168.3.201:9303"]

修改配置:node-9203/config/elasticsearch.yml

# 集群名称
cluster.name: my-app

# 节点名称
node.name: node-9203

# 节点是否可作为master
node.master: true

# 节点是否数据节点
node.data: true

# host名称(可以是IP,也可以是hostname)
network.host: 192.168.3.201

# http端口
http.port: 9203

# 集群节点间通信端口
transport.port: 9303

# 集群初始化时可被选举master的节点
cluster.initial_master_nodes: ["node-9201", "node-9202", "node-9203"]

# 节点发现(可以是IP,也可以是hostname)
discovery.seed_hosts: ["192.168.3.201:9301", "192.168.3.201:9302", "192.168.3.201:9303"]

》分别启动三个ES服务

便于查看日志,首次先前台启动

# 启动第一个节点:node-9201
[es@192 node-9201]$ bin/elasticsearch

# 启动第二个节点:node-9202
[es@192 node-9202]$ bin/elasticsearch

# 启动第三个节点:node-9203
[es@192 node-9203]$ bin/elasticsearch

如果没有问题,以后可以后台启动

# 启动第一个节点:node-9201
[es@192 node-9201]$ bin/elasticsearch -d

# 启动第二个节点:node-9202
[es@192 node-9202]$ bin/elasticsearch -d

# 启动第三个节点:node-9203
[es@192 node-9203]$ bin/elasticsearch -d

后续可以考虑做成系统服务,start|stop|restart就方便了,然后加入开启自启动。具体可以参考我的Linux开机自启动相关文章,改吧改吧就行了,标特否~

》查看集群状态

请求方式:GET

发送请求:

curl -X GET http://192.168.3.201:9201/_cat/nodes?v

响应结果:

ip            heap.percent ram.percent cpu load_1m load_5m load_15m node.role master name
192.168.3.201           57          93  31    5.45    1.97     0.92 dilmrt    *      node-9201
192.168.3.201           68          93  28    5.45    1.97     0.92 dilmrt    -      node-9203
192.168.3.201           60          93  23    5.45    1.97     0.92 dilmrt    -      node-9202

》其他配置

以下配置可能你会用到

# 选取master时需要参与的最少候选主节点数,默认1。如果使用默认值,网络不好时可能出现脑裂问题。
discovery.zen.minimum_master_nodes: 1

# 跨域相关配置(head插件需要开启)
http.cors.allow-origin: "*"
http.cors.enabled: true
http.max_content_length: 100mb

# 网络其他配置
gateway.recover_after_nodes: 2
network.tcp.keep_alive: true
network.tcp.no_delay: true
transport.tcp.compress: true

# 集群内同时启动的数据任务个数,默认是2个
cluster.routing.allocation.cluster_concurrent_rebalance: 4
# 添加或删除节点及负载均衡时并发恢复的线程个数,默认4个
cluster.routing.allocation.node_concurrent_recoveries: 8
# 初始化数据恢复时,并发恢复线程的个数,默认4个
cluster.routing.allocation.node_initial_primaries_recoveries: 8

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/745626.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号