日志存储¶
观测云的日志存储由标准存储、长期存储和 LogBamboo 冷存三部分组成,分别满足实时分析、历史回溯和私有化备份的需求。您可以根据日志的查询频率和保留要求,组合使用这三类存储。
存储构成¶
日志总存储 = 标准存储 + 长期存储 + LogBamboo 冷存。
标准存储与长期存储用于在观测云平台内保存和查询日志;LogBamboo 冷存部署在自有环境中,用于独立备份与检索。三部分共同构成日志的整体存储体系。
| 存储类型 | 主要用途 | 保留策略 | 查询方式 |
|---|---|---|---|
| 标准存储 | 实时分析和查询、日常排障 | 3 / 7 / 14 / 30 / 60 / 90 天 | 在日志查看器中使用标准查询,支持存储周期内任意时间范围的检索与分析 |
| 长期存储 | 历史日志回溯与低频查询 | 可选 90 / 120 / 180 / 360 天,且须大于标准存储时长;该时长包含标准存储周期 | 在日志查看器中使用长期查询,单次查询时间范围最长为 24 小时 |
| LogBamboo 冷存 | 日志私有化备份与长期留存 | 由用户在自有环境中配置,可长于平台内总保留周期;实际范围由策略与可用容量决定 | 在自建 LogBamboo 中检索,或通过平台的管理 > 数据转发 > 数据查看查询 |
标准存储¶
标准存储支持日志的实时分析和查询,适用于日常故障排查和仪表板等高频访问场景。
支持 3 天至 90 天的多种存储策略,您可以按业务需要选择保留时长。在配置的存储周期内,日志支持任意时间范围查询、实时响应及快速图表交互。
配置方式参见数据存储策略;如需为不同业务设置不同的保留策略,可使用多索引管理。
长期存储¶
长期存储用于保存超出标准存储周期的历史日志,适用于低频查询与历史问题回溯,最长可保留至近 360 天。查询长期存储范围内的数据时,单次查询时间范围最长为 24 小时;如需查看多天的数据,可按不超过 24 小时的时间段分别查询。
保留范围示例¶
当标准存储时长为 30 天、长期存储时长为 180 天时:
- 近第 1–30 天:属于标准存储周期;
- 近第 31–180 天:属于长期存储的数据范围;
- 平台内总保留范围:近 180 天。
长期存储时长表示包含标准存储周期在内的总保留时长。因此,上述配置覆盖的是 30 天标准存储与其后 150 天的长期存储数据,合计 180 天。
在存储量统计与计费中,长期存储仅统计超出标准存储周期的数据。第 1–30 天的数据计入标准存储,不重复计入长期存储。
LogBamboo 冷存¶
LogBamboo 提供日志私有化备份能力。对于需要长期保留的日志,您可以在本地或自有云环境中部署 LogBamboo,建立自己的备份与检索服务,用于历史故障排查、事件记录核查和低频日志查询。
独立备份与保留¶
在数据转发中选择 LogBamboo 作为目的地,完成连接配置并保存、启用规则后,符合规则的日志会自动写入 LogBamboo。转发无需等待平台内的日志存储策略到期;数据在 LogBamboo 完成处理后可查询。
LogBamboo 的存储时长由用户在自有环境中配置,可以长于平台内标准存储与长期存储覆盖的总保留周期,用于保留更早的历史日志。LogBamboo 与平台内存储分别配置保留策略,同一时段的日志可同时保存在两处;实际保留范围还取决于转发规则生效时间和可用容量。
图中的“总存储”表示三部分的存储构成;实际保留的历史范围,取决于平台存储策略、转发规则的生效时间以及 LogBamboo 的保留策略与容量。
查询入口¶
- 自建 LogBamboo:通过其查询界面,按索引、时间范围和关键词检索日志;
- 观测云平台:完成转发规则与查询 Token 配置后,进入管理 > 数据转发 > 数据查看,选择对应规则查询。平台查询入口的时间范围与权限规则参见数据查看。
部署与接入步骤参见部署 LogBamboo和数据转发至 LogBamboo。