跳转至

数据转发至 Kafka 消息队列


  1. 完成规则名称与过滤条件的设置;
  2. 继续配置存档。

开始配置

  1. 地址:Host:Port,多个节点使用逗号间隔;

  2. 消息主题:即 Topic 名称;

  3. 分区 Key:选填。在消息主题下方选择或输入字段名,支持添加多个字段。系统使用所选字段的值生成分区 Key,具体说明参见分区 Key;

  4. 安全协议:在 Kafka 侧,SASL 可以使用 PLAINTEXT 或者 SSL 协议作为传输层,相对应的就是使用 SASL_PLAINTEXT 或者 SASL_SSL 安全协议。如果使用 SASL_SSL 安全协议,必须配置 SSL 证书;

  5. 点击测试连接,若上述信息满足规范,则提示测试连接成功。点击确定即可保存当前规则。

若未通过测试:

您需确认:

  • 地址是否正确
  • 消息主题名称是否正确
  • SSL 证书是否正确
  • 用户名是否正确
  • 密码是否正确

分区 Key

分区 Key 用于决定数据写入消息主题(Topic)中的哪个分区。配置时填写数据中的字段名,系统会读取每条数据中对应字段的值生成 Key。例如,选择 userid 后,使用的是每条数据的 userid 值,而不是将字段名 userid 作为所有数据的固定 Key。

配置方式 分区说明
单个字段 例如选择 userid,相同用户的数据将进入同一分区,便于按用户集中处理。
多个字段 使用所选字段的组合值生成 Key。例如选择 userid 和 region,两条数据的这两个字段值均相同时,将进入同一分区。
不配置 沿用默认分区方式。
注意

相同 Key 的数据进入同一分区,适用于同一 Topic,且分区数量、分区 Key 配置及分区规则保持不变的情况。调整这些配置后,同一 Key 的新数据可能进入其他分区。

PLAINTEXT

无需任何安全校验,可直接测试连接。

SASL_PLAINTEXT

认证方式默认为 PLAIN,可选 SCRAM-SHA-256 与 SCRAM-SHA-512 两种。

输入在 Kafka 侧执行安全认证的 username/password,再测试连接。

SASL_SSL

此处需上传 SSL 证书。

认证方式默认为 PLAIN,可选 SCRAM-SHA-256 与 SCRAM-SHA-512 两种。

输入在 Kafka 侧执行安全认证的 username/password,再测试连接。

文档评价

文档内容是否对您有帮助?