데이터 관측¶
Guance 데이터 관측은 데이터 처리 작업의 실행 상태, 데이터 자산의 출처 및 상하위 의존 관계를 파악할 수 있게 해줍니다. 작업 실행 결과를 확인하고 데이터 출처를 추적할 수 있으며, 작업이 실패했을 때는 계보 관계를 따라 다운스트림 영향을 조사할 수 있습니다.
예를 들어 주문 원본 테이블이 정제 작업을 거쳐 주문 내역 테이블을 생성하고, 주문 내역 테이블이 다시 집계 작업에서 읽힌다고 가정해 보겠습니다. 데이터 관측은 이렇게 수집된 읽기·쓰기 관계를 다음과 같이 표시합니다.
flowchart LR
A[주문 원본 테이블] --> B[주문 정제 작업]
B --> C[주문 내역 테이블]
C --> D[주문 집계 작업]
D --> E[주문 집계 테이블]핵심 기능¶
콘솔에서 데이터 관측을 열면 기본적으로 개요가 표시됩니다. 분석 목표에 따라 다음 모듈을 전환할 수 있습니다.
| 모듈 | 용도 |
|---|---|
| 개요 | 실행 횟수, 실패한 실행, 실패한 작업, 성공률 및 실행 추세를 확인할 수 있으며, 최근 실패한 실행에서 작업 분석을 시작할 수 있습니다. |
| 데이터 카탈로그 | 데이터 자산을 검색하고 연결된 실행, 필드 구조, 직접 관계 및 확장 속성을 확인할 수 있습니다. |
| 작업 | 작업 목록과 실행 추세를 확인하고, 개별 실행으로 이동하여 상태, 소요 시간, 입력·출력 및 오류 정보를 확인할 수 있습니다. |
| 데이터 계보 | 하나 이상의 자산을 기준으로 상하위 관계를 확인하여 출처를 추적하거나 다운스트림 영향을 분석할 수 있습니다. |
핵심 객체¶
| 객체 | 설명 |
|---|---|
| 데이터셋(Dataset) | 작업이 읽거나 생성하는 데이터 자산입니다. 예: 테이블, 뷰, Topic, Stream 또는 파일 데이터셋. |
| 작업(Job) | 반복 실행할 수 있는 데이터 처리 태스크입니다. 예: 주문 정제 작업. |
| 실행(Run) | 특정 작업의 개별 실행입니다. 각 실행의 상태, 소요 시간 및 입력·출력을 확인할 수 있습니다. |
| 데이터 계보(Lineage) | 데이터 자산과 작업 간의 의존 관계로, 데이터가 어디에서 왔고 어떤 작업을 거쳐 어디로 흐르는지 설명합니다. |
시작하기¶
데이터 연동을 완료한 후 다음 단계에 따라 데이터를 확인할 수 있습니다.
- 데이터 관측 > 개요로 이동하여 실행 결과를 확인합니다.
- 작업에서 분석할 작업을 선택하고 실행 기록으로 이동하여 개별 실행의 상태, 오류 정보 및 입력·출력을 확인합니다.
- 데이터 카탈로그에서 관련 데이터 자산을 열어 필드 구조와 연결된 작업을 확인합니다.
- 데이터 계보 보기 또는 다운스트림 영향 보기를 클릭하여 상하위 관계를 따라 계속 분석합니다.
데이터를 확인하려면 대상 워크스페이스에 대한 데이터 관측 조회 권한이 필요합니다.
데이터 확인¶
데이터 관측에는 수집된 정보가 표시됩니다. 필드에 '미보고', '알 수 없음' 또는 '—'가 표시되면 해당 정보는 아직 사용할 수 없다는 뜻입니다.
저장 및 과금¶
데이터 관측은 다양한 데이터 보관 기간을 지원합니다. 설정 방법은 데이터 저장 정책을 참조하세요.
상용 플랜은 유효 Run 횟수 기준으로 과금되며, 엔터프라이즈 플랜은 쓰기 트래픽과 저장량 기준으로 과금됩니다. 자세한 내용은 상용 플랜 과금 로직 및 엔터프라이즈 플랜 과금 체계를 참조하세요.무료 플랜 할당량은 버전 비교를 참조하세요.