### Elasticsearch集群化搭建详解
#### 一、概述
Elasticsearch 是一款基于 Lucene 的分布式搜索引擎，它提供了全文检索、结构化检索以及分析等功能。在实际应用中，为了提高 Elasticsearch 的稳定性和性能，通常需要搭建 Elasticsearch 集群。本文将详细介绍如何在新主机上进行 Elasticsearch 集群的简单搭建。
#### 二、环境准备
在搭建 Elasticsearch 集群之前，我们需要准备好必要的环境：
1. **两台主机**：一台为主机 A（已安装 Elasticsearch），另一台为新主机 B。
2. **Docker Compose**：用于简化服务容器的部署。
3. **Elasticsearch 版本**：确保所有主机上 Elasticsearch 的版本保持一致。
#### 三、配置文件迁移与调整
1. **迁移配置文件**：将主机 A 上的 `docker-compose.yml` 文件复制到新主机 B 上，并进行必要的修改。
2. **配置文件修改**：
- **注释 Logstash 和 Kibana 相关配置**：在 `docker-compose.yml` 文件中，注释掉 Logstash 和 Kibana 的相关配置，仅保留 Elasticsearch 的配置。
- **修改网络模式**：将 Elasticsearch 下的 `network_mode` 设置为 `host`，即使用主机网卡。
- **添加卷映射**：在 `volumes` 部分添加 `-./elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml` 以读取自定义的配置文件。
- **hostname 变更**：在新主机 B 上，需要更改 hostname，移除与网络相关的配置。
#### 四、配置文件详解
- **Kibana 配置**：在 `kibana/config/kibana.yml` 中，需要设置 `elasticsearch.url` 为 `"http://192.168.1.178:9200"`。
- **Logstash 配置**：在 `logstash/config/logstash.conf` 中，设置 `hosts` 为 `"192.168.1.178:9200"`。
- **Elasticsearch 配置**：在 `elasticsearch/config/elasticsearch.yml` 中，主要配置包括：
- **集群名称**：设置 `cluster.name` 为 `elk-application`，确保集群中的所有节点名称统一。
- **集群 Master 地址**：设置 `discovery.zen.ping.unicast.hosts` 为 `["192.168.1.178","192.168.1.181"]`，指定集群 Master 节点的地址范围。
- **跨域访问**：设置 `http.cors.enabled` 为 `true`，并设置 `http.cors.allow-origin` 为 `"*"`, 允许跨域访问。
- **节点 IP**：设置 `network.publish_host` 为集群节点的 IP 地址，例如 `192.168.1.178`。
- **节点角色**：
- `node.master`: 指定节点是否有资格成为 Master，默认为 `true`。
- `node.data`: 指定节点是否存储索引数据，默认为 `true`。
- **索引配置**：
- `index.number_of_shards`: 设置默认索引分片个数，默认为 5。
- `index.number_of_replicas`: 设置默认索引副本个数，默认为 1。
#### 五、集群构建与测试
1. **构建集群**：使用 Docker Compose 在新主机 B 上构建 Elasticsearch 服务。
2. **加入集群**：通过配置文件中的 `discovery.zen.ping.unicast.hosts` 参数，新主机 B 自动加入到现有集群中。
3. **状态检查**：通过访问 `http://192.168.1.178:9200/_cat/indices` 来检查集群状态。
#### 六、解决索引断裂问题
- **重建索引**：当集群服务器数量发生变化后，可能会出现索引断裂的情况，导致 Elasticsearch 状态显示为 red。
- **删除红色索引**：可以通过以下几种方式删除红色索引：
- **HTTP 请求**：发送 DELETE 请求到 `http://192.168.1.178:9200/{索引ID}` 删除索引。
- **Head 插件**：使用 Head 插件直接删除。
- **Shell 脚本**：编写 Shell 脚本批量删除索引，示例脚本如下：
```bash
#!/bin/bash
# description: The shell is used for multiple delete index of elasticsearch
INDEX=(`curl --connect-timeout 5 -m 10 -s '192.168.1.178:9200/_cat/indices/*?v' | awk '{print $3}' | sed '1d'`)
for i in ${INDEX[*]}
do
curl -X DELETE "http://192.168.1.178:9200/$i/"
done
```
- **HTTP 客户端**：使用 HTTP 客户端编写程序实现删除操作。
#### 七、总结
本文详细介绍了如何在新主机上进行 Elasticsearch 集群的搭建，包括配置文件的迁移与调整、集群构建与测试、解决索引断裂问题等关键步骤。通过本文的操作指南，可以快速完成 Elasticsearch 集群的部署，并解决常见的索引断裂问题。
