跳转至

配置部署版数据转发

简介

本文将展示如何配置观测云部署版配置数据转发。

前置条件

  • 已完全初始化观测云
  • 拥有对应云厂商可配置用户、存储桶权限的账号

配置步骤

步骤一:配置存储桶与账号

华为云

  • 创建存储用户 adduser-1 adduser-2
  • 保存ak、sk,后续配置到服务中 adduser-3
  • 创建并行文件系统 createobs-1
  • 配置文件系统访问权限控制 createibs-2

阿里云

  • 创建存储用户 adduer-1
  • 保存ak、sk,后续配置到服务中 adduer-2
  • 创建oss存储桶 createoss-1
  • 为创建的用户授予oss桶权限 createoss-2

AWS

  • 创建s3存储桶 creates3-1
  • 创建用户权限策略
    {
        "Version": "2012-10-17",
        "Statement": [
            {
                "Sid": "VisualEditor0",
                "Effect": "Allow",
                "Action": "s3:*",
                "Resource": "arn:aws:s3:::bucket-name"
            }
        ]
    }
    
    createpolicy-1
  • 创建存储用户 createuer-1
  • 给新创建的用户绑定策略 createuer-2
  • 创建并保存ak、sk,后续配置到服务中 createak-1 createak-2

步骤二:修改服务配置

需要修改kodo、kodo-x等应用服务的配置让转储配置生效

  • 修改forethought-kodo命名空间下名称为kodo、kodo-x、kodo-inner的configmap资源。添加以下内容

公有云存储桶配置

backup_log:
  ${store_type}:
    ak: "LTAI5tMxxxxxxxxFroj"
    sk: "6MpS1gxxxxxxxxxxxxxxxxUoH6"
    region: "cn-northwest-1"
    bucket: "guance-backuplog"
  guance:
    store_type: "obs" 

1. ${store_type}在oss、s3、obs中选择一项,分别对应阿里云、AWS、华为云存储桶服务
2. guance.store_type 决定实际使用哪个厂商的存储服务,该值应与${store_type}相同
3. 当${store_type}为s3时,多一个配置项:partition。如果是AWS国内,该值为aws-cn,国外AWS则为aws
私有云存储桶配置
backup_log:
  ${store_type}:
    ak: "LTAI5tMxxxxxxxxFroj"
    sk: "6MpS1gxxxxxxxxxxxxxxxxUoH6"
    endpoint: "xxxxx"
    bucket: "guance-backuplog"
  guance:
    store_type: "obs"

1. ${store_type}在oss、s3、obs中选择一项,分别对应阿里云、AWS、华为云存储桶服务
2. guance.store_type 决定实际使用哪个厂商的存储服务,该值应与${store_type}相同
3. 私有存储服务多了一个配置项:endpoint。值为提供存储桶的endpoint信息

  • 修改完成后,重启kodo、kodo-x、kodo-inner、kodo-x-backuplog服务
注意

kodo-x-backuplog服务在集群里为Statefulset类型,该服务需要开启数据持久化,并且每个pod都使用独立的PVC,可以与下图中的配置进行对比

statefulset-1 pvc-1

步骤三:数据转发配置

当上述步骤都完成后需要登录到观测云中,进行数据转发的配置,配置完成后,可以参考 数据转发 进行验证 config-1

文档评价

文档内容是否对您有帮助? ×