阈值检测¶
概述¶
阈值检测用于监控指标、日志、链路等数据异常,用户可设置阈值范围,当指标到达阈值后触发告警并通知用户。支持同时检测多个指标数据并设定告警级别。
应用场景¶
支持检测指标、日志、基础设施、自定义对象、事件、应用性能监测、用户访问监测、安全巡检和网络等数据异常问题。例如您可以监控主机内存使用率过高等问题。
规则说明¶
进入监控器 > 新建监控器,选择阈值检测,进入阈值检测规则配置页面。
步骤一:检测配置¶
1)检测频率:检测规则的执行频率,包含 1m/5m/15/30m/1h/6h(默认选中 5m)。
2)检测区间:每次执行任务时,检测指标查询的时间范围。受检测频率影响,可选检测区间会有不同。
检测频率 | 检测区间(下拉可选项) |
---|---|
1m | 1m/5m/15m/30m/1h/3h |
5m | 5m/15m/30m/1h/3h |
15m | 15m/30m/1h/3h/6h |
30m | 30m/1h/3h/6h |
1h | 1h/3h/6h/12h/24h |
6h | 6h/12h/24h |
12h | 12h/24h |
24h | 24h |
3)检测指标:设置检测的数据。
字段 | 说明 |
---|---|
数据类型 | 当前检测的数据类型,支持检测指标、日志、基础设施、自定义对象、事件、应用性能监测、用户访问监测、安全巡检和网络等数据类型。 |
指标集 | 当前检测指标所在的指标集(以“指标”数据类型为例)。 |
指标 | 当前检测所针对的指标(以“指标”数据类型为例)。 |
聚合算法 | 包含 Avg by(取平均值)、Min by(取最小值)、Max by(取最大值)、Sum by(求和)、Last(取最后一个值)、First by(取第一个值)、Count by(取数据点数)、Count_distinct by(取非重复的数据点数)、p50(取中位数值)、p75(取处于75%位置的值)、p90(取处于90%位置的值)、p99(取处于99%位置的值)。 |
检测维度 | 配置数据里对应的字符串类型(keyword)字段都可以作为检测维度进行选择,目前检测维度最多支持选择三个字段。通过多个检测维度的字段组合,可以确定一个确定的检测对象,观测云会判断某个检测对象对应的统计指标是否满足触发条件的阈值,若满足条件则产生事件。(例如选择检测维度【 host 】与【 host_ip 】,则检测对象可以为{host: host1, host_ip: 127.0.0.1})当检测对象为“日志”,默认以“status”,“host”,“service”,“source”,“filename”为检测维度。 |
筛选条件 | 基于指标的标签对检测指标的数据进行筛选,限定检测的数据范围,支持添加一个或多个标签筛选,非指标类数据支持模糊匹配和模糊不匹配的筛选条件。 |
别名 | 自定义检测指标名称。 |
查询方式 | 支持简单查询、表达式查询和 PromQL 查询,详情参考 查询。 |
4)触发条件:设置告警级别的触发条件。
配置触发条件及严重程度,当查询结果为多个值时,任一值满足触发条件则产生事件。
更多详情,可参考 事件等级说明。
1、告警级别紧急(红色)、重要(橙色)、警告(黄色)基于配置条件判断运算符。
2、告警级别正常(绿色)、信息(蓝色)基于配置检测次数,说明如下:
- 每执行一次检测任务即为 1 次检测,如【检测频率 = 5 分钟】,则 1 次检测= 5 分钟;
- 可以自定义检测次数,如【检测频率 = 5 分钟】,则 3 次检测 = 15 分钟。
a. 正常(绿色):检测规则生效后,产生紧急、重要、警告异常事件后,在配置的自定义检测次数内,数据检测结果恢复正常,则产生恢复告警事件。
注意:恢复告警事件不受告警沉默限制。若未设置恢复告警事件检测次数,则告警事件不会恢复,且一直会出现在事件 > 未恢复事件列表中。
b. 信息(蓝色):正常检测结果也产生事件。
3、告警级别无数据(灰色):
- 无数据状态支持触发无数据事件、触发恢复事件、不触发事件三种配置策略;
- 基础对象和自定义对象数据监控器配置时,默认选择触发恢复事件策略。
步骤二:事件通知¶
5)事件标题:设置告警触发条件的事件名称,支持使用预置的模板变量。
注意:最新版本中监控器名称将由事件标题输入后同步生成。旧的监控器中可能存在监控器名称和事件标题不一致的情况,为了给您更好的使用体验,请尽快同步至最新。支持一键替换为事件标题。
6)事件内容:满足触发条件时发送的事件通知内容,支持输入 Markdown 格式文本信息,支持预览效果,支持使用预置的 关联链接,支持使用预置的 模板变量。
注意:不同告警通知对象支持的 Markdown 语法不同,例如:企业微信不支持无序列表。
无数据通知配置:支持自定义无数据通知内容,若没有配置,则自动使用官方默认的通知模版。
7)告警策略:监控满足触发条件后,立即发送告警消息给指定的通知对象。告警策略中包含需要通知的事件等级、通知对象、以及告警沉默周期。
8)同步创建 Issue:若该监控器下产生了异常事件,将同步创建 Issue 异常追踪,投递到异常追踪的频道中。您可以前往异常追踪 > 您选定的频道进行查看。
步骤三:关联¶
9)关联仪表板:每一个监控器都支持关联一个仪表板,即通过关联仪表板功能能够自定义快速跳转的仪表板(监控器关联的仪表板,支持快速跳转查看监控视图)。
示例¶
监控主机内存 Swap 使用率过高。