ES的自我保护机制，磁盘超过多少会进入只读模式，怎么解决

Elasticsearch 的自我保护机制确保集群在面对潜在问题时保持稳定性和数据安全。具体到磁盘使用率，以下是相关细节：

1. 自我保护机制

• 磁盘空间监控：Elasticsearch 定期检查每个节点的磁盘使用率。
• 只读模式：当节点的磁盘使用达到 95% 时，Elasticsearch 会自动将该节点设置为只读模式，以防止写入操作，确保数据安全和集群稳定。

2. 磁盘使用阈值

• 85%：发出警告，建议释放空间。
• 90%：开始阻止新的索引请求。
• 95%：进入只读模式，阻止所有写入操作。

3. 解决方案

一旦节点进入只读模式，可以采取以下措施：

a. 释放磁盘空间

• 删除旧索引：使用以下命令删除不再需要的索引：

  DELETE /index_name
  

• 清理快照：如果使用了快照，确保清理不再需要的快照数据。

b. 增加磁盘容量

• 扩展磁盘：增加物理或虚拟机的磁盘空间。
• 挂载新磁盘：将新的存储设备挂载到节点上。

c. 重新启用写入

一旦释放了足够的磁盘空间，可以使用以下命令将节点从只读模式中恢复：

PUT /_cluster/settings
{
  "persistent": {
    "cluster.blocks.read_only_allow_delete": null
  }
}

使用 curl 命令恢复 Elasticsearch 中的只读模式，以下是具体步骤：

恢复只读模式

1. 确保节点已释放足够的磁盘空间：在恢复之前，请确保磁盘使用率已经降到安全范围（通常低于 90%）。

2. 使用 curl 恢复只读模式：
   可以使用以下命令将集群从只读模式恢复：

   curl -u <username>:<password> -X PUT "http://<your-es-host>:9200/_cluster/settings" -H 'Content-Type: application/json' -d '{
     "persistent": {
       "cluster.blocks.read_only_allow_delete": null
     }
   }'
   

   • 将 <your-es-host> 替换为您的 Elasticsearch 主机名或 IP 地址。
   • 确保在命令中添加 -H 'Content-Type: application/json'，以设置请求头。

检查恢复状态

您可以通过以下命令检查集群的健康状态，确保恢复成功：

curl -u <username>:<password> -X GET "http://<your-es-host>:9200/_cluster/health?pretty"

这将返回集群的健康状态和信息。

小提示

• 如果您有多个节点，确保在所有节点上都释放了足够的磁盘空间。
• 监控 Elasticsearch 的磁盘使用情况，防止再次进入只读模式。

4. 监控与预防

• 设置监控：使用工具（如 Kibana、Elasticsearch 的监控 API 等）监控磁盘使用情况，提前采取措施。
• 优化索引：定期优化索引，删除不必要的数据，保持磁盘使用率在安全范围内。