乐趣区

关于elasticsearch:从零开始-Elasticsearh-Docker-单机集群

jiezi

  • 筹备工作

    • VirtualBox 虚拟机增加

      • 新建虚拟机
      • 内存大小
      • 虚构硬盘
      • 虚构硬盘文件类型
      • 存储在物理硬盘上
      • 文件地位和大小
      • 载入镜像文件
      • 网卡配置

    • Centos 7.8 装置

      • 抉择语言
      • 磁盘分区
      • 手动分区
      • 网络配置
      • 设置 Root 明码

    • docker 装置 && Elasticsearch 镜像

      • docker 装置
      • docker 查看版本
      • 拉取镜像

    • 数据目录

      • config && Log && Data
      • 文件权限
      • vm.max_map_count 调整
    • 参数阐明

    • 配置文件 && 运行

      • Es0
      • Es1
      • Es2
      • 启动 ElasticSearch 集群容器
      • 查看集群状态

    • Elasticsearch-Head

      • 装置
      • Node.js
      • 查看集群状态
      • 模仿节点下线

    • ik 插件装置

      • 下载地址
      • 复制
      • 获取容器 ID
      • 复制 ik
    • docker 启动 or 敞开快捷命令

    • Elasticsearch 集群连贯

      • PHP
      • JAVA

    • Elasticsearch 节点分类

      • 主节点
      • 数据节点
      • 客户节点
    • 援用

筹备工作

VirtualBox 虚拟机增加

1、新建虚拟机

2、内存大小

3、虚构硬盘

4、虚构硬盘文件类型

5、存储在物理硬盘上

6、文件地位和大小

7、载入镜像文件

8、网卡配置


Centos 7.8 装置

1、抉择语言

2、磁盘分区

3、手动分区


swap 分区，个别物理内存的 2 倍
boot 分区, centos 6.x 100M 7.X 300M
/ 根分区，调配剩下来所有存储空间

4、网络配置

5、设置 Root 明码

docker 装置 && Elasticsearch 镜像

1、docker 装置 
curl -fsSL https://get.docker.com | bash -s docker --mirror Aliyun
2、docker 查看版本 
docker version
3、拉取镜像 
docker pull elasticsearch:5.4.3

数据目录

1、config && Log && Data
mkdir -p /usr/local/elasticsearch/{config,logs/{node0,node1,node2},data/{node0,node1,node2}}
touch es0.yml es1.yml es2.yml
tree elasticsearch
elasticsearch/
├── config
│   ├── es0.yml
│   ├── es1.yml
│   └── es2.yml
├── data
│   ├── node0
│   ├── node1
│   └── node2
└── logs
    ├── node0
    ├── node1
    └── node2
2、文件权限 
chmod -R 777 /usr/local/elasticsearch/data/*
chmod -R 777 /usr/local/elasticsearch/logs/*
chmod -R 777 /usr/local/elasticsearch/config/*
4、vm.max_map_count 调整 
echo vm.max_map_count=262144 >> /etc/sysctl.conf
sysctl -p

参数阐明

集群名称

cluster.name: elasticsearch-cluster

节点名

node.name: es-nodex

主节点

node.master

数据节点

node.data

外网拜访配置

network.bind_host 设置成 0.0.0.0 任何主机都能够拜访

本机 ip

network.publish_host

设置对外服务的 http 端口，默认为 9200

http.port

设置节点间交互的 tcp 端口，默认是 9300

transport.tcp.port

跨域拜访

http.cors.enabled: true
http.cors.allow-origin: “*”

设置集群中 master 节点的初始列表，能够通过这些节点来主动发现新退出集群的节点

discovery.zen.ping.unicast.hosts

该属性定义的是为了造成一个集群，有主节点资格并相互连贯的节点的最小数目。
discovery.zen.minimum_master_nodes
//quorum 的算法 =master 候选节点数量 /2+1
JVM 内存大小配置

ES_JAVA_OPTS=-Xms512m -Xmx512m

配置 && 运行

Es0
cluster.name: elasticsearch-cluster

node.name: es-node1
node.master: true 
node.data: true  

network.bind_host: 0.0.0.0
network.publish_host: 192.168.56.101

http.port: 9200
transport.tcp.port: 9300

http.cors.enabled: true
http.cors.allow-origin: "*"

discovery.zen.ping.unicast.hosts: ["192.168.56.101:9300","192.168.56.101:9301","192.168.56.101:9302"]
discovery.zen.minimum_master_nodes: 2
Es1
cluster.name: elasticsearch-cluster

node.name: es-node2
node.master: true 
node.data: true  

network.bind_host: 0.0.0.0
network.publish_host: 192.168.56.101

http.port: 9201
transport.tcp.port: 9301

http.cors.enabled: true
http.cors.allow-origin: "*"

discovery.zen.ping.unicast.hosts: ["192.168.56.101:9300","192.168.56.101:9301","192.168.56.101:9302"]
discovery.zen.minimum_master_nodes: 2
Es2
cluster.name: elasticsearch-cluster

node.name: es-node3
node.master: true 
node.data: true  

network.bind_host: 0.0.0.0
network.publish_host: 192.168.56.101

http.port: 9202
transport.tcp.port: 9302

http.cors.enabled: true
http.cors.allow-origin: "*"

discovery.zen.ping.unicast.hosts: ["192.168.56.101:9300","192.168.56.101:9301","192.168.56.101:9302"]
discovery.zen.minimum_master_nodes: 2
启动 ElasticSearch 集群容器 
 docker run -e ES_JAVA_OPTS="-Xms256m -Xmx256m" -d -p 9200:9200 -p 9300:9300 -v /usr/local/elasticsearch/config/es0.yml:/usr/share/elasticsearch/config/elasticsearch.yml -v /usr/local/elasticsearch/data/node0:/usr/share/elasticsearch/data --name ES01 elasticsearch:5.4.3
 
 docker run -e ES_JAVA_OPTS="-Xms256m -Xmx256m" -d -p 9201:9201 -p 9301:9301 -v /usr/local/elasticsearch/config/es1.yml:/usr/share/elasticsearch/config/elasticsearch.yml -v /usr/local/elasticsearch/data/node1:/usr/share/elasticsearch/data --name ES02 elasticsearch:5.4.3

 docker run -e ES_JAVA_OPTS="-Xms256m -Xmx256m" -d -p 9202:9202 -p 9302:9302 -v /usr/local/elasticsearch/config/es2.yml:/usr/share/elasticsearch/config/elasticsearch.yml -v /usr/local/elasticsearch/data/node2:/usr/share/elasticsearch/data --name ES03 elasticsearch:5.4.3
查看集群状态 
http://192.168.56.102:9200/_cat/nodes?pretty

<font color=red> 谬误：</font>

{"error":{"root_cause":[{"type":"master_not_discovered_exception","reason":null}],"type":"master_not_discovered_exception","reason":null},"status":503}

<font color=blue> 起因：外部 Tcp 通信端口没有凋谢 </font>

firewall-cmd --add-port=9300/tcp
firewall-cmd --add-port=9301/tcp
firewall-cmd --add-port=9302/tcp

Elasticsearch-Head

elasticsearch-head 装置 
git clone git://github.com/mobz/elasticsearch-head.git
Node.js 装置 
wget https://nodejs.org/dist/v12.18.3/node-v12.18.3-linux-x64.tar.xz
tar xvf node-v12.18.3-linux-x64.tar.xz

vim /etc/profile
export NODE_HOME=/usr/local/node-v12.18.3-linux-x64
export PATH=$PATH:$NODE_HOME/bin
export NODE_PATH=$NODE_HOME/lib/node_modules

source /etc/profile
elasticsearch-head 运行 
cd /usr/local/elastic-head
npm install
npm run start

firewall-cmd --add-port=9100/tcp
查看集群状态

模仿节点下线 
PUT _cluster/settings
{
  "transient" : {"cluster.routing.allocation.exclude._name" : "es-node2"}
}


复原节点 

PUT _cluster/settings
{
  "transient" : {"cluster.routing.allocation.exclude._name" : ""}
}

ik 插件

下载地址 
https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v5.4.3/elasticsearch-analysis-ik-5.4.3.zip
复制 
docker cp /usr/local/src/elasticsearch-analysis-ik-5.4.3.zip {容器 ID}:/usr/share/elasticsearch/plugins
获取容器 ID
docker ps
docker ps -a -q
复制 ik
docker exec -it {容器 ID} /bin/bash
cd plugins

mkdir ik 
mv elasticsearch-analysis-ik-5.4.3.zip ik
unzip elasticsearch-analysis-ik-5.4.3.zip
rm -rf elasticsearch-analysis-ik-5.4.3.zip

docker 启动 or 敞开快捷命令 

docker start $(docker ps -a -q)
docker stop $(docker ps -a -q)

ELasticsearch 集群连贯

PHP
use Elasticsearch\ClientBuilder;

$hosts => [
    '192.168.56.102:9200',
    '192.168.56.102:9201',
    '192.168.56.102:9202',
];

$client = ClientBuilder::create()
    ->setHosts($hosts)
    ->setSelector('\Elasticsearch\ConnectionPool\Selectors\RoundRobinSelector')
    ->allowBadJSONSerialization()
    ->build();
JAVA

Transport Client
RESTful Client

Elasticsearch 节点

主节点 
node.master: true
node.data: true
数据节点 
node.master: false
node.data: true
客户节点 
node.master: false
node.data: false

援用

https://segmentfault.com/a/11…
https://blog.csdn.net/belongh…

退出移动版