采集器「华为云-DIS」配置手册¶

阅读本文前，请先阅读：

云集成

Tip

使用本采集器前，必须安装「集成 Core 核心包」及其配套的第三方依赖包

1. 配置结构¶

本采集器配置结构如下：

配置一（推荐）

字段	类型	是否必须	说明
`regions`	list	必须	所需采集的地域列表
`regions[#]`	str	必须	地域 ID。如：`'cn-north-4'` 总表见附录

Tip

采集器会自动获取地域下的所有 IAM 项目，再根据 IAM 项目获取资源

配置二（旧版兼容）

字段	类型	是否必须	说明
`region_projects`	dict	必须	所需采集数据的「地域 - 项目 ID」列表
`region_projects[#]`	str:list	必须	键值对中： Key 代表地域（如：`'cn-north-4'`） Value 代表该地域下所需采集的项目 ID 列表总表见附录

2. 配置示例¶

指定地域¶

采集cn-north-4地域对应项目的 DIS 实例数据

collector_configs = {
    'regions': ['cn-north-4']
}

3. 数据上报格式¶

数据正常同步后，可以在观测云的「基础设施-资源目录」中查看数据。

上报的数据示例如下：

{
  "measurement": "huaweicloud_dis",
  "tags": {
    "RegionId"             : "cn-north-4",
    "project_id"           : "c631f04625xxxxexxxxxx253c62d48585",
    "enterprise_project_id": "0",
    "name"                 : "dis-YoME",
    "status"               : "RUNNING",
    "stream_name"          : "dis-YoME",
    "stream_type"          : "COMMON"
  },
  "fields": {
    "data_type"            : "BLOB",
    "partition_count"      : 1,
    "retention_period"     : 24,
    "auto_scale_enabled"   : false,
    "create_time"          : 1691484876645,
    "message"              : "{实例 JSON 数据}"
  }
}

部分参数说明如下

字段	类型	说明
`create_time`	integer	通道创建的时间，13位时间戳。
`retention_period`	integer	数据保留时长，单位是小时。
`status`	str	通道的当前状态。 CREATING：创建中 RUNNING：运行中 TERMINATING：删除中 TERMINATED：已删除
`stream_type`	str	通道类型。 COMMON：普通通道，表示1MB带宽。 ADVANCED：高级通道，表示5MB带宽。
`data_type`	str	源数据类型。 BLOB：存储在数据库管理系统中的一组二进制数据。 JSON：一种开放的文件格式，以易读的文字为基础，用来传输由属性值或者序列性的值组成的数据对象。 CSV：纯文本形式存储的表格数据，分隔符默认采用逗号。缺省值：BLOB。
`auto_scale_enabled`	bool	是否开启自动扩缩容。 true：开启自动扩缩容。 false：关闭自动扩缩容。默认不开启。缺省值：false

Note

tags、fields 中的字段可能会随后续更新有所变动

Tip

tags.name 值为实例 ID，作为唯一标识

Tip

以下字段均为 JSON 序列化后字符串

fields.message

X. 附录¶

华为云 DIL「地域 ID」¶

请参考华为云官方文档：