탐색기¶

애플리케이션 생성이 완료되면 시스템은 각 Agent / LLM 요청을 로그 이벤트로 처리하여 탐색기에 집계합니다. 검색 및 필터링을 통해 단일 또는 모든 애플리케이션의 모든 Session 및 Trace 데이터를 분석할 수 있습니다.

페이지 상단에서 Agent / LLM 상태를 전환할 수 있으며, 기본값은 Agent 상태입니다.

Agent 상태¶

Agent 상태에서 페이지 상단에는 두 개의 필터 상자가 표시됩니다.

• Agent 유형: 모든 Agent 유형을 필터링하거나 특정 유형을 지정합니다.
• 인스턴스: 해당 Agent 유형의 특정 인스턴스를 필터링하며, 인스턴스 이름 검색을 지원합니다. 특정 Agent 유형을 선택하면 인스턴스 필터는 해당 유형의 인스턴스만 표시합니다. Agent 유형을 선택하지 않으면 인스턴스 필터는 기본적으로 모든 인스턴스로 설정되지만 선택할 수 없습니다.

LLM 상태¶

LLM 상태로 전환하면 페이지 상단에 애플리케이션 필터 컨트롤이 표시되며, 모든 애플리케이션 또는 특정 LLM 애플리케이션을 선택하여 볼 수 있습니다.

보기 모드¶

사용자 목록¶

Agent 전체 탐색기는 사용자 차원에서 Agent 유형 간 데이터를 집계하는 것을 지원합니다. 개별 Agent 유형 상세 페이지에도 사용자 탭이 있어 해당 유형의 사용자 사용 현황을 확인할 수 있습니다.

Agent 유형 상세 페이지에는 다음과 같은 최상위 탭이 포함됩니다.

인스턴스 목록 / 사용자 목록 / Session / Trace

Session 목록¶

기본적으로 Session 차원의 데이터가 표시됩니다. 목록 필드에는 Session ID, 입력 Token, 출력 Token, 위험 이벤트 수 및 알림 등급이 포함됩니다. 왼쪽의 빠른 필터는 Token 범위, 모델 제공자, 요청 모델, 응답 모델 등의 차원을 기준으로 필터링하는 것을 지원합니다. 목록, 상위 목록, 시계열 차트, 원형 차트, 트리맵, 그룹 테이블 차트 등 다양한 분석 보기를 지원합니다.

• 위험 이벤트 수: 현재 Session에서 감지된 위험 이벤트의 총 개수입니다.
• 알림 등급: 현재 Session에서 위험 이벤트의 최고 알림 등급입니다. 위험 이벤트가 없으면 무위험 상태로 표시됩니다.

특정 행을 클릭하면 Session 상세 페이지로 이동합니다.

• 개요: 왼쪽에는 Session Trace 워터폴 차트가 표시되고, 오른쪽에는 미리보기, 속성 정보 및 현재 Session의 알림 등급이 표시됩니다.
• 호출 분석: 모델 호출 비율, Tool 실행 비율 및 Skill 실행 비율과 현재 Session과 연결된 Trace 및 위험 이벤트를 표시합니다. 위험 이벤트는 알림 등급, 관련 작업 및 발생 시간 등의 정보를 표시합니다.

Trace 목록¶

Trace 목록 탭으로 전환하면 Trace 차원으로 데이터를 볼 수 있습니다. 목록 필드에는 Trace ID, 소속 Session, Trace 소요 시간, 입력 Token, 출력 Token, Trace 상태, 위험 작업 수 및 알림 등급이 포함됩니다.

• 위험 작업 수: 현재 Trace에서 위험한 작업으로 표시된 작업의 수입니다.
• 알림 등급: 현재 Trace의 모든 위험한 작업 중 최고 알림 등급입니다.

특정 행을 클릭하면 Trace 상세 페이지로 이동합니다.

• 개요: 워터폴 차트를 통해 Trace 호출 과정을 표시하고 현재 Trace의 알림 등급을 표시합니다. 아래에는 Span 상세 정보가 표시됩니다.
• 호출 분석: Tool 및 Skill 호출 기록을 표시합니다. 위험한 작업에는 위험 표시가 표시되며, 관련 Tool, Skill 및 기타 작업 정보에는 위험 등급도 함께 표시됩니다.

상세 페이지¶

상세 페이지로 이동하면 왼쪽에는 애플리케이션에서 생성된 단일 Span 및 Trace가 표시되고, 오른쪽에는 해당 미리보기 및 속성 정보가 표시됩니다.

위험 알림¶

시스템은 Agent 실행 중 생성된 위험 이벤트를 기반으로 Session, Trace, Tool, Skill 등의 객체에 위험 표시를 수행합니다.

위험 알림 정보는 다음 위치에 나타날 수 있습니다.

Session 또는 Trace에 여러 위험 이벤트가 포함된 경우 목록 및 개요는 그중 최고 알림 등급을 표시합니다. 호출 분석의 위험 이벤트에서 특정 위험 이벤트 또는 위험한 작업을 클릭하면 보안 점검으로 이동하여 세부 정보를 확인할 수 있습니다.

관련 작업¶

• 노드 이름 source를 기준으로 검색하여 위치를 찾습니다.
• 지표 및 점수 표시 여부를 선택합니다.

미리보기¶

노드 유형, 노드 이름, 실행 소요 시간, Token 소비, 실행 상태, 실행 세부 정보를 포함합니다.

상태 표시¶

실행 세부 정보¶

애플리케이션의 Input(입력) 및 Output(출력)을 표시합니다. 전자는 모델로 전송되는 최종 요청을 구성하는 모든 요소를 포함하고, 후자는 입력을 기반으로 생성된 결과를 표시합니다.

속성 정보¶

현재 Span 또는 Trace에 포함된 관련 필드 정보입니다.

연결된 보기¶

오른쪽 상단의 + 버튼을 통해 기본 제공 보기를 현재 상세 페이지에 바인딩하여 Agent / LLM 데이터의 특화된 표시를 구현할 수 있습니다.

1. 추가 버튼을 클릭합니다.
2. 연결할 필드를 선택합니다.
3. 팝업되는 기본 제공 보기 바인딩 패널에서 연결할 보기를 선택합니다.
4. 바인딩이 성공하면 새 탭 페이지가 탭 표시줄에 표시됩니다.

추가 자료¶

다음 내용에 관심이 있을 수 있습니다.