大慢查询隔离
更新时间 2026-11-12 11:05:34
最近更新时间: 2026-11-12 11:05:34
基于OpenSearch的大慢查询功能核心是通过合理管控资源占用过大的查询任务,保障OpenSearch实例的稳定性和高可用性。
在搜索和数据分析的场景中,时常会出现少量资源占用过大的搜索请求,例如复杂的聚合、深层分页、全局排序等查询请求。这些请求可能长期占用实例宝贵的 CPU、内存等资源,会增加实例负担,甚至引起服务异常。
开启大慢查询隔离功能后,为保证实例平稳运行,当实例资源相对紧张的时候,会通过限制慢查询语句对资源的占用,尽快释放资源来保护实例。
功能介绍
大慢查询隔离功能仅限OpenSearch实例使用,且此功能默认是monitor模式,仅仅占用监控资源,并不会对实例内任务执行有实际影响。
此功能主要对以下资源进行重点监控:CPU使用率、堆内存使用率、任务已耗时间。仅当设置为enforced模式后,后台监控线程,会对于超过阈值的任务进行打分,并按照规则进行评分,采样式地对于占用资源过多的任务进行强制干预,释放其所占用资源,维护集群稳定性和高可用性。
配置介绍
以下指令和结果需要登录OpenSearch Dashboards的Dev Tools内可以执行。
模式配置
monitor_only:默认。后台线程会持续监控数据,不会对于实例内任务进行实际干预。
enforced:实例会根据情况实施慢查询隔离动作。
disabled:完全关闭此模式。
示例:如下配置表示配置了enforced模式。
PUT /_cluster/settings
{
"persistent": {
"search_backpressure": {
"mode": "enforced"
}
}
}监控阈值配置
资源监控支持单一或多阈值同时配置。
| 参数 | 默认值 | 说明 |
|---|---|---|
| search_backpressure.node_duress.cpu_threshold | 90% | CPU阈值:节点CPU使用率超过90%时,触发阈值判定 |
| search_backpressure.node_duress.heap_threshold | 70% | 堆内存阈值:节点堆内存使用率超过70%时,触发阈值判定 |
| search_backpressure.search_task.elapsed_time_millis_threshold | 45,000(45秒) | 耗时阈值:单个父任务运行超过45秒后,触发阈值判定 |
示例:我们对于多个阈值进行配置修改:
PUT /_cluster/settings
{
"persistent": {
"search_backpressure": {
"search_task.elapsed_time_millis_threshold": 10000,
"node_duress.cpu_threshold": 0.4,
"node_duress.heap_threshold": 0.4
}
}
}状态查看
可通过如下指令,查看慢查询隔离的历史统计和当前值:
GET _nodes/stats/search_backpressure示例:
调用上述指令获取到如下结果:
如图所示,堆内存使用率的tracker里记录了触发大慢查询隔离的统计结果。同时,也记录了实例内整体大慢查询隔离相关统计信息。
说明
不同场景不同查询业务,可能触发的阈值和任务调控会有不同,以上仅为参考示例。