当前位置: 首页 > article >正文

优化 Elasticsearch 集群性能:解决节点压力不均衡问题及分片策略调整

在管理 Elasticsearch 集群时,我们经常会遇到节点间压力不均衡的问题,这通常是由不合理的分片策略导致的。本文将分享一个真实案例的解决过程,以及如何优化分片策略来提升集群整体性能。

1. 问题描述

在我们的 Elasticsearch 集群中,我们发现数据节点之间的 JVM 内存压力存在显著差异。这种不均衡主要是由于索引的分片策略不当,导致节点间分片分配不均匀。

2. 初步解决方案

我们首先对大型索引(超过 100GB)的分片策略进行了调整。然而,由于存在旧索引(3、4、5日的数据),效果并不立即显现。

3. 观察期

我们决定在接下来的两周内,等待使用旧分片策略的索引被清除。预期在此期间后,集群节点压力不均的现象应该会得到改善。

4. 评估效果

在旧索引清除后,我们重点关注以下指标:

  • 数据节点的 JVMMemoryPressure 指标
  • 使用 _cat/nodes API 查看各数据节点的 JVM 内存使用情况

我们特别留意是否还存在长时间保持较大差异的现象。

使用以下 Dev Tools 命令查看节点状态:

GET _cat/nodes?v&

http://www.kler.cn/a/312550.html

相关文章:

  • [项目代码] YOLOv5 铁路工人安全帽安全背心识别 [目标检测]
  • 稀疏视角CBCT重建的几何感知衰减学习|文献速递-基于深度学习的病灶分割与数据超分辨率
  • 【CICD】GitLab Runner 和执行器(Executor
  • HTML之列表
  • Elasticsearch中什么是倒排索引?
  • sql server启用远程连接与修改默认端口
  • git统计代码行数、提交数
  • 每日OJ题_牛客_WY22 Fibonacci数列(斐波那契)
  • 解决uniapp视频video组件进入全屏再退出全屏后,cover-view失效的问题
  • C++——用选择法对10个数值进行排序。
  • 即时通讯框架MobileIMSDK的H5端开发快速入门
  • Python数据分析案例60——扩展变量后的神经网络风速预测(tsfresh)
  • 系统架构设计师:系统架构设计
  • etcd二次封装
  • Docker上安装mysql
  • MySQL在大数据场景应用
  • 代码随想录训练营 Day60打卡 图论part10 SPFA算法 Bellman-Ford 之判断负权回路 Bellman-Ford 之单源有限最短路
  • vue常用业务场景
  • 通过springcloud gateway优雅的进行springcloud oauth2认证和权限控制
  • Python编码系列—Python代理模式:为对象赋予超能力的魔法
  • QTcpSocket和QLocalSocket详解
  • 【网络编程】socket套接字|sockaddr|sockaddr_in|通信过程
  • 《深度学习》—— 神经网络模型中的损失函数及正则化惩罚和梯度下降
  • 如何搭建虚拟机Ubuntu?
  • icpc江西:L. campus(dij最短路)
  • el-input 只能输入数字和一个小数点,或者只能输入两位小数