볼칸 엔진 VCM Kafka¶
볼칸 엔진 VCM Kafka의 표시 지표에는 Broker 가동률, CPU 사용률, 메모리 사용률, 디스크 사용률, 메시지 생산 및 소비 속도, 요청 지연 시간 등이 포함되며, 이러한 지표는 Kafka 인스턴스의 실행 상태, 자원 사용량, 성능을 보여줍니다.
설정¶
Func 설치¶
추천: Guance 통합 - 확장 - 호스팅 버전 Func: 모든 사전 조건이 자동으로 설치됩니다. 계속해서 스크립트를 설치하세요
Func를 직접 배포하는 경우 Func 직접 배포를 참고하세요
설치 스크립트¶
알림: 요구사항을 만족하는 볼칸 엔진 AK를 미리 준비하세요(간단히 하려면 전역 읽기 전용 권한
ReadOnlyAccess를 직접 부여해도 됩니다)
VCM Kafka 클라우드 자원의 모니터링 데이터를 동기화하려면, 다음 수집 스크립트를 설치합니다: 「Guance 통합(볼칸 엔진-VCM Kafka 수집)」(ID：integration_volcengine_vcm_kafka)
[설치]를 클릭한 뒤, 해당 파라미터를 입력하세요: 볼칸 엔진 AK, 볼칸 엔진 계정 이름.
[배포 시작 스크립트]를 클릭하면 시스템이 자동으로 Startup 스크립트 집합을 생성하고, 대응하는 시작 스크립트를 자동으로 설정합니다.
활성화한 뒤에는 「관리 / 자동 트리거 설정」에서 대응하는 자동 트리거 설정을 볼 수 있습니다. [실행]을 클릭하면 주기 시간을 기다리지 않고 즉시 한 번 실행할 수 있습니다. 잠시 후 실행 작업 기록과 해당 로그를 확인할 수 있습니다.
대응하는 로그를 수집하려면 관련 로그 수집 스크립트도 활성화해야 합니다. 청구서를 수집하려면 클라우드 청구 수집 스크립트를 활성화해야 합니다.
검증¶
- 「관리 / 자동 트리거 설정」에서 대응하는 작업이 이미 있는지 확인하고, 작업 기록과 로그를 확인해 이상 여부를 점검합니다
- Guance의 「인프라 / 사용자 정의」에서 자산 정보가 있는지 확인합니다
- Guance의 「지표」에서 대응하는 모니터링 데이터가 있는지 확인합니다
지표¶
볼칸 엔진 - 클라우드 모니터링을 설정하면 기본 지표 집합은 다음과 같습니다. 설정을 통해 더 많은 지표를 수집할 수 있습니다. 볼칸 엔진 클라우드 모니터링 지표 상세
주의:
volcengineVCM Kafka 콘솔에 모니터링 플러그인을 설치해야 합니다
MetricName |
Subnamespace |
지표 이름 | MetricUnit |
차원 |
|---|---|---|---|---|
MetricName |
SubNamespace |
지표명 | MetricUnit |
차원 |
broker_online_rate |
Instance |
브로커 가동률 | Percent | ResourceID |
cap_util |
Instance |
용량 사용률 | Percent | ResourceID |
connections_count |
Instance |
인스턴스 연결 수 | Count | ResourceID |
connections_per_ip |
Instance |
IP 연결 수 | Count | ClientIP,ResourceID |
consumption_rate_percent |
Instance |
소비 대역폭 비율 | Percent | ResourceID |
consumption_request_mean_time |
Instance |
메시지 소비 평균 소요 시간 | Millisecond | ResourceID |
consumption_request_p99_time |
Instance |
메시지 소비 P99 소요 시간 | Millisecond | ResourceID |
cpu_util |
Instance |
CPU 사용률 | Percent | ResourceID |
disk_util |
Broker |
디스크 사용률 | Percent | ResourceID,Broker |
dsik_skewness |
Instance |
디스크 불균형률 | Percent | ResourceID |
group_consumption_rate |
Group |
소비 그룹 소비 속도 | Count | Group,ResourceID |
group_msg_accum |
Group |
소비 그룹 메시지 누적량 | Count | Group,ResourceID |
group_rebalance_count |
Group |
소비 그룹 재균형 횟수 | Count | Group,ResourceID |
instance_available_group |
Instance |
남은 사용 가능 소비 그룹 수 | Count | ResourceID |
instance_available_partition |
Instance |
남은 사용 가능 파티션 수 | Count | ResourceID |
max_disk_util |
Instance |
노드 최대 디스크 사용률 | Percent | ResourceID |
mem_util |
Instance |
메모리 사용률 | Percent | ResourceID |
msg_consumption_rate |
Instance |
메시지 소비 속도 | Bytes/Second(SI) | ResourceID |
msg_production_count |
Instance |
메시지 생산 건수 | Count/Second | ResourceID |
msg_production_rate |
Instance |
메시지 생산 속도 | Bytes/Second(SI) | ResourceID |
partition_msg_accum |
Group_Partition |
파티션 메시지 누적량 | Count | Group,Partition,ResourceID,Topic |
produce_request_mean_time |
Broker |
메시지 생산 평균 소요 시간 | Millisecond | ResourceID,Broker |
production_rate_percent |
Instance |
생산 대역폭 비율 | Percent | ResourceID |
production_request_mean_time |
Instance |
메시지 생산 평균 소요 시간 | Millisecond | ResourceID |
production_request_p99_time |
Instance |
메시지 생산 P99 소요 시간 | Millisecond | ResourceID |
req_consumption_count |
Instance |
메시지 소비 횟수 | Count/Second | ResourceID |
req_production_count |
Instance |
메시지 생산 횟수 | Count/Second | ResourceID |
topic_consumption_rate |
Group_Topic |
토픽 소비 속도 | Count | Group,ResourceID,Topic |
topic_data_size |
Topic |
토픽 데이터 크기 | Bits(IEC) | ResourceID,Topic |
topic_msg_accum |
Group_Topic |
토픽 메시지 누적량 | Count | Group,ResourceID,Topic |
객체¶
수집된 볼칸 엔진 VCM Kafka 객체 이름 volcengine_kafka 데이터 구조는 「인프라 - 사용자 정의」에서 객체 데이터를 확인할 수 있습니다.