Elasticsearch 單機(jī)集群及多機(jī)集群Docker實踐

（一）Docker 單機(jī)集群部署

拉取鏡像

docker pull docker.elastic.co/elasticsearch/elasticsearch:7.4.2

搭建集群

1. docker-compose 搭建elasticsearch 集群

  • (1). 首先安裝docker-compose docker-compose

  • (2). 建立docker-compose.yml 內(nèi)容如下：

    version: '2.2'
    services:
        es01:
            image: docker.elastic.co/elasticsearch/elasticsearch:7.4.2
            container_name: es01
            environment:
            - node.name=es01
            - cluster.name=es-docker-cluster
            - discovery.seed_hosts=es02,es03
            - cluster.initial_master_nodes=es01,es02,es03
            - bootstrap.memory_lock=true
            - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
            ulimits:
            memlock:
                soft: -1
                hard: -1
            volumes:
            - data01:/usr/share/elasticsearch/data
            ports:
            - 9200:9200
            networks:
            - elastic
        es02:
            image: docker.elastic.co/elasticsearch/elasticsearch:7.4.2
            container_name: es02
            environment:
            - node.name=es02
            - cluster.name=es-docker-cluster
            - discovery.seed_hosts=es01,es03
            - cluster.initial_master_nodes=es01,es02,es03
            - bootstrap.memory_lock=true
            - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
            ulimits:
            memlock:
                soft: -1
                hard: -1
            volumes:
            - data02:/usr/share/elasticsearch/data
            networks:
            - elastic
        es03:
            image: docker.elastic.co/elasticsearch/elasticsearch:7.4.2
            container_name: es03
            environment:
            - node.name=es03
            - cluster.name=es-docker-cluster
            - discovery.seed_hosts=es01,es02
            - cluster.initial_master_nodes=es01,es02,es03
            - bootstrap.memory_lock=true
            - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
            ulimits:
            memlock:
                soft: -1
                hard: -1
            volumes:
            - data03:/usr/share/elasticsearch/data
            networks:
            - elastic

    volumes:
        data01:
            driver: local
        data02:
            driver: local
        data03:
            driver: local

    networks:
        elastic:
            driver: bridge

  • (3). 啟動集群

    • 啟動命令： docker-compose up
    • 查看節(jié)點(diǎn)狀態(tài)：curl -X GET "localhost:9200/_cat/nodes?v&pretty"

  • (4). 刪除集群

    • 刪除集群命令： docker-compose down 刪除構(gòu)建的容器，但是并不會清除掛載的數(shù)據(jù)卷以及數(shù)據(jù)。docker-compose down -v 則會清除掛載的數(shù)據(jù)卷以及數(shù)據(jù)

2. 非docker-compose 搭建集群

現(xiàn)在也來建三個節(jié)點(diǎn)分別是: es01,es02,es03;端口分別是: 9300,9301,9302

  • (1). 創(chuàng)建一個 elasticsearch.yml 內(nèi)容如下：
#es01
 cluster.name: "es-docker-cluster"
 network.host: 0.0.0.0
 network.publish_host: 172.16.5.1
 discovery.seed_hosts: ["172.16.5.1:9301","172.16.5.1:9302"] #所有master 節(jié)點(diǎn)ip 如果本機(jī)為master這里配置除本機(jī)以外的master  ip:93端口( transport.tcp.port)
 transport.tcp.port: 9300 #es02 9301 es03 9302
 cluster.initial_master_nodes: ["172.16.5.1:9301","172.16.5.1:9302","172.16.5.1:9300"]
  • (2). 啟動命令
#node1
docker run -p 9200:9200 -p 9300:9300 --name="es01" -e ES_JAVA_OPTS="-Xms512m -Xmx512m" -e node.name="es01" -v path/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml  docker.elastic.co/elasticsearch/elasticsearch:7.4.2

#node2
docker run -p 9201:9200 -p 9301:9301 --name="es02" -e ES_JAVA_OPTS="-Xms512m -Xmx512m" -e node.name="es02" -v path/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml docker.elastic.co/elasticsearch/elasticsearch:7.4.2

#node3
docker run -p 9202:9200 -p 9302:9302 --name="es03" -e ES_JAVA_OPTS="-Xms512m -Xmx512m" -e node.name="es03" -v path/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml docker.elastic.co/elasticsearch/elasticsearch:7.4.2

（二）Docker 多機(jī)集群部署

鏡像獲取同單機(jī)部署一樣,須在每一個節(jié)點(diǎn)都拉取docker鏡像.

  • 假設(shè)現(xiàn)有三臺不同的主機(jī) ip 分別為172.16.5.1, 172.16.5.2, 172.16.5.3。
node ip
es01 172.16.5.1
es02 172.16.5.2
es03 172.16.5.3

搭建多機(jī)集群

這里就直接用 docker-compose 來搭建elasticsearch 多機(jī)集群

  1. 創(chuàng)建elasticsearch.yml 
 #es01
 cluster.name: "docker-cluster"
 network.host: 0.0.0.0
 network.publish_host: 172.16.5.1  ## 改成相應(yīng)的 node ip
  1. 創(chuàng)建docker-compose.yml 
version: '2.2'
services:
  es01: #相應(yīng)node的服務(wù)名
    image: docker.elastic.co/elasticsearch/elasticsearch:7.4.2
    container_name: es01
    environment:
      - node.name=es01 #相應(yīng)的node名
      - cluster.name=es-docker-cluster
      - bootstrap.memory_lock=true
      - "discovery.seed_hosts=172.16.5.2, 172.16.5.3" #所有master 節(jié)點(diǎn)ip 如果本機(jī)為master這里配置除本機(jī)以外的master ip
      - "cluster.initial_master_nodes=172.16.5.1,172.16.5.2,172.16.5.3" #ES啟動時所有具有master選舉權(quán)的節(jié)點(diǎn)ip
      - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
    ulimits:
      memlock:
        soft: -1
        hard: -1
    volumes:
      - /home/elasticsearch/data:/usr/share/elasticsearch/data:rw  #把數(shù)據(jù)掛載在外面
      - /config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml #掛載elasticsearch.yml
    ports:
      - 9200:9200
      - 9300:9300
    networks:
      - elastic
networks:
  elastic:
    driver: bridge

注意問題

  1. 掛載數(shù)據(jù)的時候出現(xiàn)訪問受限以至于無法啟動時，可將掛載數(shù)據(jù)的目錄所有者和用戶組改為 elastic 前提條件得先創(chuàng)建用戶和用戶組,省事一點(diǎn)就直接 chown -R 1000:1000 /home/elasticsearch/data
  2. 在運(yùn)行elasticsearch時出現(xiàn) max virtual memory areas vm.max_map_count [65530], 請在宿主機(jī)中執(zhí)行: sudo sysctl -w vm.max_map_count=262144 或者運(yùn)行sudo vi /etc/sysctl.conf在文件中追加vm.max_map_count=262144 保存后執(zhí)行sudo sysctl -p
  3. cluster.initial_master_nodes 為集群創(chuàng)建初期具有master選舉權(quán)的節(jié)點(diǎn)。
  4. discovery.seed_hosts 發(fā)送信息給具有master選舉權(quán)的節(jié)點(diǎn)，如果當(dāng)前節(jié)點(diǎn)具有master節(jié)點(diǎn)的選舉權(quán)，則需要向其他同樣具有master節(jié)點(diǎn)選舉權(quán)的發(fā)送消息。如果無master 節(jié)點(diǎn)選舉權(quán)，則須把所有具有master選舉權(quán)的節(jié)點(diǎn)host 加入。
  5. 集群master節(jié)點(diǎn)須大于等于3個，因為如果當(dāng)前主節(jié)點(diǎn)掛了之后es須從具有master 選舉權(quán)的節(jié)點(diǎn)中重新選舉出新的主節(jié)點(diǎn)，如果具有master 選舉權(quán)的節(jié)點(diǎn)存活少于一半時，節(jié)點(diǎn)是無法完成選舉的，所以必須有大于一半以上且具有master選舉權(quán)的節(jié)點(diǎn)存在時es才能重新選舉出新的主節(jié)點(diǎn)。不然節(jié)點(diǎn)無法工作。
  6. elasticsearch.yml里的配置都可在docker-compose.yml中environment里覆蓋。

the end enjoy！

最后編輯于 ：
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成，瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點(diǎn)，簡書系信息發(fā)布平臺，僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容