콘텐츠로 이동

AWS EMR Serverless

AWS EMR Serverless 모니터링 데이터를 수집합니다.

구성

Func 설치

Guance 통합 - 확장 - 호스팅 Func를 활성화하는 것을 권장합니다. 모든 사전 요구 사항이 자동으로 설치되므로 스크립트 설치를 진행하세요.

직접 Func를 배포하는 경우 Func 직접 배포를 참고하세요

스크립트 활성화

참고: 요구 사항을 충족하는 AWS AK를 미리 준비하세요. 간편하게 설정하려면 전역 읽기 전용 권한 ReadOnlyAccess를 직접 부여할 수 있습니다.

관리형 Func에서 스크립트 활성화

  1. Guance 콘솔에 로그인합니다
  2. 【통합】 메뉴를 클릭하고 【클라우드 계정 관리】를 선택합니다
  3. [클라우드 계정 추가]를 클릭하고 [AWS]를 선택한 뒤 화면에 필요한 정보를 입력합니다. 이전에 클라우드 계정 정보가 이미 설정되어 있다면 이 단계를 건너뜁니다
  4. [테스트]를 클릭하고, 테스트에 성공하면 [저장]을 클릭합니다. 테스트에 실패하면 관련 설정이 올바른지 확인한 뒤 다시 테스트합니다
  5. 【클라우드 계정 관리】 목록에서 추가된 클라우드 계정을 확인할 수 있습니다. 해당 클라우드 계정을 클릭해 상세 페이지로 들어갑니다
  6. 클라우드 계정 상세 페이지에서 【통합】을 클릭하고 미설치 목록에서 AWS EMR Serverless를 찾은 다음 【설치】를 클릭하여 설치 양식을 엽니다.

수동 활성화 스크립트

  1. Func 콘솔에 로그인하고 【스크립트 마켓】을 클릭하여 Guance 스크립트 마켓을 연 다음 integration_aws_emr_serverless를 검색합니다.
  2. 【설치】를 클릭하고 AWS AK ID, AK Secret 및 계정 이름을 입력합니다.
  3. 【시작 스크립트 배포】를 클릭하면 Startup 스크립트 집합과 시작 스크립트가 자동으로 구성됩니다. regions를 실제 리전으로 설정하고 cloudwatch_configs.targets의 metrics를 수집할 AWS 기본 메트릭 이름으로 설정한 다음 게시하고 자동 트리거를 활성화합니다.
  4. 활성화 후 「관리 / 자동 트리거 구성」에서 구성을 확인할 수 있습니다. 【실행】을 클릭하면 예약 시간을 기다리지 않고 즉시 실행합니다. 잠시 후 작업 기록과 로그를 확인하세요.

검증

  1. [관리 / 자동 트리거 구성]에서 해당 작업의 자동 트리거 구성이 있는지 확인하고 작업 기록과 로그에서 이상 여부를 점검합니다.
  2. Guance의 「인프라 / 사용자 정의」에서 자산 정보가 있는지 확인합니다
  3. Guance의 【메트릭】에서 해당 모니터링 데이터가 있는지 확인합니다.

지표

AWS CloudWatch를 구성하면 기본적으로 아래 메트릭을 수집합니다. 구성을 통해 메트릭을 추가할 수 있습니다. AWS EMR Serverless 메트릭 세부 정보

메트릭 집합은 aws_emrserverless입니다.

MetricName MetricDescribe Dimensions Unit
max_cpuallowed_maximum 애플리케이션에 허용되는 최대 vCPU 수 region_id, application_id, application_name vCPU
max_memory_allowed_maximum 애플리케이션에 허용되는 최대 메모리 용량 region_id, application_id, application_name GB
max_storage_allowed_maximum 애플리케이션에 허용되는 최대 스토리지 용량 region_id, application_id, application_name GB
cpuallocated_average 애플리케이션에 할당된 vCPU 수 region_id, application_id, application_name, worker_type, capacity_allocation_type vCPU
idle_worker_count_average 애플리케이션의 유휴 Worker 수 region_id, application_id, application_name, worker_type, capacity_allocation_type count
memory_allocated_average 애플리케이션에 할당된 메모리 용량 region_id, application_id, application_name, worker_type, capacity_allocation_type GB
pending_creation_worker_count_average 애플리케이션에서 생성 대기 중인 Worker 수 region_id, application_id, application_name, worker_type, capacity_allocation_type count
running_worker_count_average 애플리케이션에서 실행 중인 Worker 수 region_id, application_id, application_name, worker_type, capacity_allocation_type count
storage_allocated_average 애플리케이션에 할당된 디스크 스토리지 용량 region_id, application_id, application_name, worker_type, capacity_allocation_type GB
total_worker_count_average 애플리케이션에서 사용 가능한 총 Worker 수 region_id, application_id, application_name, worker_type, capacity_allocation_type count
submitted_jobs_average Submitted 상태의 작업 수 region_id, application_id, application_name count
pending_jobs_average Pending 상태의 작업 수 region_id, application_id, application_name count
scheduled_jobs_average Scheduled 상태의 작업 수 region_id, application_id, application_name count
running_jobs_average Running 상태의 작업 수 region_id, application_id, application_name count
success_jobs_average Success 상태의 작업 수 region_id, application_id, application_name count
failed_jobs_average Failed 상태의 작업 수 region_id, application_id, application_name count
cancelling_jobs_average Cancelling 상태의 작업 수 region_id, application_id, application_name count
cancelled_jobs_average Cancelled 상태의 작업 수 region_id, application_id, application_name count
worker_cpu_allocated_sum 작업의 Worker에 할당된 총 vCPU 수 region_id, job_id, job_name, application_id, application_name, worker_type, capacity_allocation_type vCPU
worker_cpu_used_sum 작업의 Worker가 사용한 총 vCPU 수 region_id, job_id, job_name, application_id, application_name, worker_type, capacity_allocation_type vCPU
worker_memory_allocated_sum 작업의 Worker에 할당된 총 메모리양 region_id, job_id, job_name, application_id, application_name, worker_type, capacity_allocation_type GB
worker_memory_used_sum 작업의 Worker가 사용한 총 메모리양 region_id, job_id, job_name, application_id, application_name, worker_type, capacity_allocation_type GB
worker_ephemeral_storage_allocated_sum 작업의 Worker에 할당된 임시 스토리지 용량 region_id, job_id, job_name, application_id, application_name, worker_type, capacity_allocation_type GB
worker_ephemeral_storage_used_sum 작업의 Worker가 사용한 임시 스토리지 용량 region_id, job_id, job_name, application_id, application_name, worker_type, capacity_allocation_type GB
worker_storage_read_bytes_sum 작업의 Worker가 스토리지에서 읽은 바이트 수 region_id, job_id, job_name, application_id, application_name, worker_type, capacity_allocation_type B
worker_storage_write_bytes_sum 작업의 Worker가 스토리지에 쓴 바이트 수 region_id, job_id, job_name, application_id, application_name, worker_type, capacity_allocation_type B
failed_sessions_average Failed 상태의 세션 수 region_id, application_name, application_id -
started_sessions_average Started 상태의 세션 수 region_id, application_name, application_id -
starting_sessions_average Starting 상태의 세션 수 region_id, application_name, application_id -
submitted_sessions_average Submitted 상태의 세션 수 region_id, application_name, application_id -
terminated_sessions_average Terminated 상태의 세션 수 region_id, application_name, application_id -
terminating_sessions_average Terminating 상태의 세션 수 region_id, application_name, application_id -

문서 평가

이 페이지가 도움이 되었나요?