AWS Kinesis Analytics¶
사용 스크립트 마켓의 「Guance 클라우드 동기화」 시리즈 스크립트 패키지로 클라우드 모니터링과 클라우드 자산 데이터를 Guance로 동기화합니다
구성¶
Func 설치¶
Guance 통합 - 확장 - 호스팅 Func를 활성화하는 것을 권장합니다. 모든 사전 요구 사항이 자동으로 설치되므로 스크립트 설치를 진행하세요.
직접 Func를 배포하는 경우 Func 직접 배포를 참고하세요
설치 스크립트¶
안내: 요구 사항에 맞는 Amazon AK를 미리 준비해 주세요. (간단히 하려면 전역 읽기 전용 권한
ReadOnlyAccess를 직접 부여해도 됩니다)
관리형 Func에서 스크립트 활성화¶
- Guance 콘솔에 로그인합니다
- 【통합】 메뉴를 클릭하고 【클라우드 계정 관리】를 선택합니다
- [클라우드 계정 추가]를 클릭하고 [AWS]를 선택한 뒤 화면에 필요한 정보를 입력합니다. 이전에 클라우드 계정 정보가 이미 설정되어 있다면 이 단계를 건너뜁니다
- [테스트]를 클릭하고, 테스트에 성공하면 [저장]을 클릭합니다. 테스트에 실패하면 관련 설정이 올바른지 확인한 뒤 다시 테스트합니다
- 【클라우드 계정 관리】 목록에서 추가된 클라우드 계정을 확인할 수 있습니다. 해당 클라우드 계정을 클릭해 상세 페이지로 들어갑니다
- 클라우드 계정 상세 페이지에서 【통합】을 클릭하고
미설치목록에서AWS Kinesis Analytics를 찾은 다음 【설치】를 클릭하여 설치 양식을 엽니다.
수동 활성화 스크립트¶
-
Func 콘솔에 로그인한 뒤 【스크립트 마켓】을 클릭하고 Guance 스크립트 마켓으로 들어가
integration_aws_kinesis_analytics를 검색합니다 -
[설치]를 클릭한 뒤 다음 파라미터를 입력합니다. AWS AK ID, AK Secret, 계정명.
-
[배포 시작 스크립트]를 클릭하면 시스템이 자동으로
Startup스크립트 세트를 생성하고, 해당 시작 스크립트를 자동으로 구성합니다. -
활성화 후에는 [관리 / 자동 트리거 설정]에서 해당 자동 트리거 구성을 확인할 수 있습니다. [실행]을 클릭하면 예약 시간을 기다리지 않고 즉시 한 번 실행할 수 있습니다. 잠시 후 실행 작업 기록과 해당 로그를 확인할 수 있습니다.
검증¶
- [관리 / 자동 트리거 구성]에서 해당 작업의 자동 트리거 구성이 있는지 확인하고 작업 기록과 로그에서 이상 여부를 점검합니다.
- Guance의 「인프라 / 사용자 정의」에서 자산 정보가 있는지 확인합니다
- Guance의 【메트릭】에서 해당 모니터링 데이터가 있는지 확인합니다.
지표¶
Amazon CloudWatch를 구성하면 기본 지표 집합은 다음과 같으며, 설정을 통해 더 많은 지표를 수집할 수 있습니다 Amazon CloudWatch 지표 상세
| 지표 | 설명 | 단위 |
|---|---|---|
cpuUtilization |
태스크 매니저의 CPU 사용률 총 백분율입니다. 예를 들어 태스크 매니저가 5개 있는 경우 Kinesis Data Analytics는 각 보고 간격마다 이 지표의 샘플 5개를 게시합니다. | 백분율 |
containerCPUUtilization |
Flink 애플리케이션 클러스터의 태스크 매니저 컨테이너에서 CPU 사용률의 총 백분율입니다. 예를 들어 태스크 매니저가 5개이면 이에 따라 TaskManager 컨테이너도 5개 있으며, Kinesis Data Analytics는 1분 보고 간격마다 이 지표의 2 * 5개 샘플을 게시합니다. | 백분율 |
containerMemoryUtilization |
Flink 애플리케이션 클러스터의 태스크 매니저 컨테이너 메모리 사용률의 총 백분율입니다. 예를 들어 태스크 매니저가 5개이면 이에 따라 TaskManager 컨테이너도 5개 있으며, Kinesis Data Analytics는 1분 보고 간격마다 이 지표의 2 * 5개 샘플을 게시합니다. | 백분율 |
containerDiskUtilization |
Flink 애플리케이션 클러스터의 태스크 매니저 컨테이너에서 디스크 사용률의 총 백분율입니다. 예를 들어 태스크 매니저가 5개이면 이에 따라 TaskManager 컨테이너도 5개 있으며, Kinesis Data Analytics는 1분 보고 간격마다 이 지표의 2 * 5개 샘플을 게시합니다. | 백분율 |
heapMemoryUtilization |
태스크 매니저의 전체 힙 메모리 사용률입니다. 예를 들어 태스크 매니저가 5개인 경우 Kinesis Data Analytics는 각 보고 간격마다 이 지표의 샘플 5개를 게시합니다. | 백분율 |
oldGenerationGCCount |
모든 태스크 매니저에서 발생한 old generation garbage collection 작업의 총 횟수입니다. | 개수 |
oldGenerationGCTime |
old generation garbage collection 작업을 수행하는 데 걸린 총 시간입니다. | 밀리초 |
threadCount |
애플리케이션에서 사용하는 실시간 스레드의 총 수입니다. | 개수 |
객체¶
수집된 AWS KinesisAnalytics 객체 데이터 구조로, 「인프라-사용자 정의」에서 객체 데이터를 볼 수 있습니다
{
"measurement": "aws_kinesis_analytics",
"tags": {
"ApplicationARN": "arn:aws-cn:xxxx:xxxx",
"ApplicationMode": "STREAMING",
"ApplicationName": "zsh_test",
"ApplicationStatus": "RUNNING",
"ApplicationVersionId": "3",
"RegionId": "cn-northwest-1",
"RuntimeEnvironment": "FLINK-1_15",
"name": "zsh_test"
},
"fields": {
"message" : "{인스턴스 JSON 데이터}"
}
}
주의:
tags와fields의 필드는 이후 업데이트에 따라 변경될 수 있습니다