ElasticSearch集群支持動(dòng)態(tài)請(qǐng)求的方式
搭建集群和靜態(tài)配置文件
搭建集群
關(guān)于集群的動(dòng)態(tài)連接方式官方的文檔:https://www.elastic.co/guide/en/elasticsearch/reference/current/cluster-update-settings.html
前置準(zhǔn)備工作
關(guān)于參數(shù)的官網(wǎng)說明:
https://www.elastic.co/guide/en/elasticsearch/reference/current/modules-discovery-settings.html
下載elsticsearch 7.8.0
docker pull elasticsearch:7.8.0
創(chuàng)建一個(gè)網(wǎng)絡(luò)es_net 用來放elasticsearch集群
docker network create --subnet=172.18.0.0/24 es_net
根據(jù)官網(wǎng)的dockerFile文件中的信息 WORKDIR /usr/share/elasticsearch可以得知 elasticsearch 的安裝位置在/usr/share/elasticsearch目錄下,為了方便后面的操作,創(chuàng)建數(shù)據(jù)卷將elasticsearch產(chǎn)生的數(shù)據(jù)映射到主機(jī)中,防止es宕機(jī)數(shù)據(jù)無(wú)法恢復(fù)。
創(chuàng)建數(shù)據(jù)卷
docker volume create es_data01
docker volume create es_data02
docker volume create es_data03
#公共配置文件,以及插件存放位置
docker volume create es_conf
docker volume create es_plugins
分別存放數(shù)據(jù)、配置、插件
創(chuàng)建3個(gè)yml配置文件
動(dòng)態(tài)的方式搭建ElasticSearch集群(推薦)
意味著只要啟動(dòng)ElasticSearch然后通過ES自帶的RestFul風(fēng)格的操作既可以完成集群的搭建
dockerhub中官方的啟動(dòng)方式是單節(jié)點(diǎn)的啟動(dòng)
先單獨(dú)啟動(dòng)3個(gè)ElasticSearch節(jié)點(diǎn)
啟動(dòng)es01
docker run -it -d --restart always -p 9201:9200 -p 9301:9300 \
--name es01 --network=es_net --ip=172.18.0.101 \
-v es_data01:/usr/share/elasticsearch/data \
-v es_conf:/usr/share/elasticsearch/conf \
-v es_plugins:/usr/share/elasticsearch/plugins \
-e "discovery.type=single-node" \
-e ES_JAVA_OPTS="-Xms64m -Xmx128m" elasticsearch:7.8.0
啟動(dòng)es02
docker run -it -d --restart always -p 9202:9200 -p 9302:9300 \
--name es02 --network=es_net --ip=172.18.0.102 \
-v es_data02:/usr/share/elasticsearch/data \
-v es_conf:/usr/share/elasticsearch/conf \
-v es_plugins:/usr/share/elasticsearch/plugins \
-e "discovery.type=single-node" \
-e ES_JAVA_OPTS="-Xms64m -Xmx128m" elasticsearch:7.8.0
啟動(dòng)es03
docker run -it -d --restart always -p 9203:9200 -p 9303:9300 \
--name es03 --network=es_net --ip=172.18.0.103 \
-v es_data03:/usr/share/elasticsearch/data \
-v es_conf:/usr/share/elasticsearch/conf \
-v es_plugins:/usr/share/elasticsearch/plugins \
-e "discovery.type=single-node" \
-e ES_JAVA_OPTS="-Xms64m -Xmx128m" elasticsearch:7.8.0
通過PUT方式
通過linux的curl命令操作即可
在es02和es03上通過
curl -X PUT "localhost:9200/_cluster/settings?pretty" -H 'Content-Type: application/json' -d'
{
"persistent" : {
"cluster" : {
"remote" : {
"leader" : {
"seeds" : [
"127.0.0.1:9300"
]
}
}
}
}
}
'
更新persistent
curl -X PUT "localhost:9200/_cluster/settings?pretty" -H 'Content-Type: application/json' -d'
{
"persistent" : {
"indices.recovery.max_bytes_per_sec" : "50mb"
}
}
'
更新transient
curl -X PUT "localhost:9200/_cluster/settings?flat_settings=true&pretty" -H 'Content-Type: application/json' -d'
{
"transient" : {
"indices.recovery.max_bytes_per_sec" : "20mb"
}
}
'
刪除transient配置內(nèi)容
curl -X PUT "localhost:9200/_cluster/settings?pretty" -H 'Content-Type: application/json' -d'
{
"transient" : {
"indices.recovery.max_bytes_per_sec" : null
}
}
'
刪除所有transient設(shè)置
curl -X PUT "localhost:9200/_cluster/settings?pretty" -H 'Content-Type: application/json' -d'
{
"transient" : {
"indices.recovery.*" : null
}
}
'
ElasticSearch通過靜態(tài)配置文件的方式啟動(dòng)集群
失敗的原因應(yīng)該是啟動(dòng)容器的時(shí)候應(yīng)該少了參數(shù)。
官網(wǎng)文檔 上說將來的版本不再使用discovery.zen.ping.unicast.hosts也就變成discovery.seed_hosts
es-node1節(jié)點(diǎn)的配置文件信息
vim /var/lib/docker/volumes/es_conf/_data/es01.yml
請(qǐng)修改注釋行宿主機(jī)ip,以及es集群通信的端口地址
cluster.name: elasticsearch-cluster
node.name: es-node1
network.bind_host: 0.0.0.0
network.publish_host: 192.168.117.231 #修改為docker的宿主機(jī)ip
http.port: 9200 #這個(gè)是容器內(nèi)部的,所以不用改
transport.tcp.port: 9300 #這個(gè)是容器內(nèi)部的,所以不用改
http.cors.enabled: true
http.cors.allow-origin: "*"
node.master: true
node.data: true
discovery.seed_hosts: ["192.168.117.231:9300","192.168.117.231:9301","192.168.117.232:9302"]
discovery.zen.minimum_master_nodes: 2
indices.query.bool.max_clause_count: 10240
#使用一臺(tái)主機(jī)的不同端口搭建,在啟動(dòng)docker容器的時(shí)候通過-p指定映射端口
通過上述配置文件中可知需要映射端口分別是9300、9301、9302,這些端口是用來進(jìn)行集群通信的
也就是三個(gè)節(jié)點(diǎn)綁定端口分別是-p 9300:9300,-p 9301:9300,-p 9302:9300,
同時(shí)我們可以推出使用-p 9200:9200,-p 9201:9200,-p 9202:9200
做成表格:
|
節(jié)點(diǎn) |
綁定宿主機(jī)端口1 |
綁定宿主機(jī)端口2 |
es-node1 |
9200 |
9300 |
es-node2 |
9201 |
9301 |
es-node3 |
9202 |
9301 |
作用 |
對(duì)外提供服務(wù)的端口 |
es1-es3集群間進(jìn)行通訊的端口 |
也就是說宿主機(jī)(192.168.117.231)的9200-9202,9300-9302端口都會(huì)被es集群使用
es-node2節(jié)點(diǎn)的配置文件信息
vim /var/lib/docker/volumes/es_conf/_data/es02.yml
與es-node1不同的地方就是節(jié)點(diǎn)名改一下
cluster.name: elasticsearch-cluster
node.name: es-node2
network.bind_host: 0.0.0.0
network.publish_host: 192.168.117.231 #修改為docker的宿主機(jī)ip
http.port: 9200 #這個(gè)是容器內(nèi)部的,所以不用改
transport.tcp.port: 9300 #這個(gè)是容器內(nèi)部的,所以不用改
http.cors.enabled: true
http.cors.allow-origin: "*"
node.master: true
node.data: true
discovery.seed_hosts: ["192.168.117.231:9300","192.168.117.231:9301","192.168.117.232:9302"]
discovery.zen.minimum_master_nodes: 2
indices.query.bool.max_clause_count: 10240
#使用一臺(tái)主機(jī)的不同端口搭建,在啟動(dòng)docker容器的時(shí)候通過-p指定映射端口
es-node3節(jié)點(diǎn)的配置文件信息
vim /var/lib/docker/volumes/es_conf/_data/es02.yml
與es-node1不同的地方就是節(jié)點(diǎn)名改一下
cluster.name: elasticsearch-cluster
node.name: es-node3
network.bind_host: 0.0.0.0
network.publish_host: 192.168.117.231 #修改為docker的宿主機(jī)ip
http.port: 9200 #這個(gè)是容器內(nèi)部的,所以不用改
transport.tcp.port: 9300 #這個(gè)是容器內(nèi)部的,所以不用改
http.cors.enabled: true
http.cors.allow-origin: "*"
node.master: true
node.data: true
discovery.seed_hosts: ["192.168.117.231:9300","192.168.117.231:9301","192.168.117.232:9302"]
discovery.zen.minimum_master_nodes: 2
indices.query.bool.max_clause_count: 10240
#使用一臺(tái)主機(jī)的不同端口搭建,在啟動(dòng)docker容器的時(shí)候通過-p指定映射端口
依次啟動(dòng)集群
es-node1啟動(dòng)命令,docker進(jìn)程別名es01
使用的網(wǎng)絡(luò)是上面創(chuàng)建的網(wǎng)卡es_net,指定節(jié)點(diǎn)的內(nèi)部網(wǎng)絡(luò)ip 172.18.0.100需要和es_net同網(wǎng)段
docker run -it -d --restart always -p 9200:9200 -p 9300:9300 \
--name es01 --network=es_net --ip=172.18.0.100 \
-v es_data01:/usr/share/elasticsearch/data \
-v /var/lib/docker/volumes/es_conf/_data/es01.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
-v es_plugins:/usr/share/elasticsearch/plugins \
-e ES_JAVA_OPTS="-Xms64m -Xmx128m" elasticsearch:7.8.0
ES_JAVA_OPTS指定使用的es的內(nèi)存,防止啟動(dòng)es占用太多內(nèi)存空間
--restart always開機(jī)自啟
數(shù)據(jù)卷映射略,唯一需要注意的是配置文件es01.yml映射到了內(nèi)部的es啟動(dòng)時(shí),引使用的配置文件。
es-node2啟動(dòng)命令
docker run -it -d --restart always -p 9201:9200 -p 9301:9300 \
--name es02 --network=es_net --ip=172.18.0.101 \
-v es_data02:/usr/share/elasticsearch/data \
-v /var/lib/docker/volumes/es_conf/_data/es02.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
-v es_plugins:/usr/share/elasticsearch/plugins \
-e ES_JAVA_OPTS="-Xms64m -Xmx128m" elasticsearch:7.8.0
es-node3啟動(dòng)命令
docker run -it -d --restart always -p 9202:9200 -p 9302:9300 \
--name es03 --network=es_net --ip=172.18.0.102 \
-v es_data03:/usr/share/elasticsearch/data \
-v /var/lib/docker/volumes/es_conf/_data/es03.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
-v es_plugins:/usr/share/elasticsearch/plugins \
-e ES_JAVA_OPTS="-Xms64m -Xmx128m" elasticsearch:7.8.0
到此這篇關(guān)于docker安裝ElasticSearch:7.8.0集群的文章就介紹到這了,更多相關(guān)docker安裝ElasticSearch集群內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!