日志智能检测¶
日志智能检测基于智能检测算法,监控工作空间内采集器产生的日志数据。智能识别日志数量的突增 / 突降、错误日志的突增的异常数据,及时发现不符合预期的异常状态。
应用场景¶
多适用于 IT 监控场景下的代码异常或任务调度检测等。例如监控日志的错误数突增。
新建¶
点击智能监控器 > 新建智能监控 > 日志智能检测,进入日志智能检测配置页面。
步骤一:检测配置¶
1)监控器名称:支持编辑监控器名称。
2)检测维度:支持基于 Source(By Source)或基于 Service (By Service)检测,自动匹配用户选择的检测维度。
3)检测范围:基于指标的标签对检测指标的数据进行筛选,限定检测的数据范围,支持添加一个或多个标签筛选。若不添加筛选,检测所有日志的数据。
步骤二:事件通知¶
1)事件内容:提供预置的事件通知模版,满足触发条件时发送事件通知内容,同时,支持输入 Markdown 格式文本信息补充事件描述,支持预览效果,支持使用预置的 关联链接和模板变量。
注意:不同告警通知对象支持的 Markdown 语法不同,例如:企业微信不支持无序列表。
2)关联异常追踪:开启关联后,若该监控器下产生了异常事件,将同步创建 Issue。选择 Issue 的等级以及需要投递的目标频道,产生的 Issue 可以前往异常追踪 > 您选定的频道进行查看。
在事件恢复后,可以同步关闭 Issue。
事件内容自定义高级配置¶
观测云支持在事件内容中通过高级配置添加关联日志或错误堆栈,以便查看异常情况发生时的上下文数据情况:
- 添加关联日志:
查询:
如:获取一条索引为 default
的日志 message
:
关联日志:
- 添加关联错误堆栈
查询:
{% set dql_data = DQL("T::re(`.*`):(`error_message`,`error_stack`){ (`source` NOT IN ['service_map', 'tracing_stat', 'service_list_1m', 'service_list_1d', 'service_list_1h', 'profile']) AND (`error_stack` = exists()) } LIMIT 1") %}
关联错误堆栈:
步骤三:告警配置¶
告警策略:监控满足触发条件后,立即发送告警消息给指定的通知对象。
注意:智能监控触发的事件等级为【重要】。
查看事件¶
监控器会获取最近 10 分钟的检测日志指标,识别出现日志数量的突增 / 突降、错误日志的突增情况时,会生成对应的事件,在事件 > 智能监控列表可查看异常事件。
事件详情页¶
点击事件,可查看智能监控事件的详情页,包括事件状态、异常发生时间、异常名称、分析报告、告警通知、历史记录和关联事件。
-
点击右上角的跳转到监控器,可查看调整智能监控器配置;
-
点击右上角的导出按钮,支持选择导出 JSON 文件与导出 PDF 文件,从而获取当前事件所对应的所有关键数据。
分析报告
-
异常总结:可查看当前异常日志标签、异常分析报告详情、及错误请求数分布情况
-
错误分析:可查看错误日志的聚类信息
注意:存在多个区间异常时,异常总结 > 异常值分布图及异常分析仪表板默认展示第一段异常区间的异常情况分析,可以点击【异常值分布图】进行切换,切换后异常分析仪表板同步联动。