コンテンツにスキップ

分析ダッシュボード


Agent モニタリング > 分析ダッシュボードでは、選択したアプリケーションのメトリクス情報をグラフ形式で表示し、アプリケーションパフォーマンスとコスト分布を包括的に把握できます。

Agent 概要ページのアプリケーションエントリから分析ダッシュボードにアクセスすることもできます。特定の Agent からアクセスすると、その Agent のフィルター条件が自動的に適用されます。

ページ上部では Agent / LLM ステータスの切り替えが可能で、デフォルトは Agent ステータスです。

注意

フィルター期間内にデータがない場合、グラフ領域には「データがありません」と表示されます。右上の時間ウィジェットで表示範囲を調整できます。

LLM モニタリング

LLM モニタリングアプリケーションを選択すると、分析ダッシュボードに以下の内容が表示されます。

コアメトリクス概要

ダッシュボード上部には、選択した時間範囲における主要メトリクスの統計情報が表示されます。

  1. リクエスト数:総リクエスト回数の統計
  2. Span 数:関連する Span 呼び出しの総数
  3. リクエストエラー率:失敗したリクエストが総リクエストに占める割合
  4. トークン総消費量:全リクエストで消費されたトークンの総量
  5. 平均応答レイテンシ:全リクエストの平均処理時間

トレンド分析チャート

複数のトレンドチャートを通じて、アプリケーションパフォーマンスと使用傾向の変化を追跡できます。

  1. リクエストトレンドグラフ:時間帯ごとのリクエスト量分布を確認し、使用ピークを特定
  2. リクエストエラー率:エラー率の変化傾向を表示し、異常な変動を迅速に検出
  3. リクエスト応答時間:平均、P75、P90、P99 パーセンタイルレイテンシを表示し、ロングテールレイテンシ問題を特定
  4. トークン消費トレンドグラフ:トークン使用量の時間分布を表示し、コスト予測を支援
  5. 最初のトークンの平均応答時間(TTFT):初回トークンのレイテンシを測定し、モデルの応答速度を反映

モデルとユーザー分析

モデルとユーザーの観点からリソース使用状況とパフォーマンスを分析します。

  1. モデル別リクエスト数割合:ドーナツチャートで異なるモデルの呼び出し分布を表示(例:qwen3:1.7b)
  2. モデル別トークン使用量ランキング:モデルごとのリソース消費を比較
  3. モデル別リクエスト応答分析(Top 20):各モデルのリクエスト数、平均/最大レイテンシ、パーセンタイルレイテンシなどの詳細なパフォーマンスメトリクスを表形式で表示
  4. ユーザーリクエスト数ランキング(Top 10):高頻度利用ユーザーを特定
  5. ユーザートークン消費ランキング(Top 10):高コストユーザーを特定し、コスト配分を支援

Agent モニタリング

Agent モニタリングアプリケーションを選択すると、分析ダッシュボードは実行概要、モデルとトークン、Tool モジュール、Skill モジュールに分けて Agent Runtime の呼び出し、トークン、レイテンシデータを表示します。

フィルター条件

ページでは以下の条件でダッシュボードデータをフィルタリングできます。

  • Agent タイプ
  • Agent ID
  • Agent 名称
  • モデルプロバイダー

Agent ID と Agent 名称の選択可能な値は、上位のフィルター条件に応じて連動して更新されます。時間範囲やフィルター条件を切り替えると、ダッシュボードの概要、分布、トレンド、表データが同期して更新されます。

実行概要

実行概要では、現在の時間範囲における全体的な呼び出しとトークン使用状況を表示します。

  • 総操作数:Tool、Skill、LLM 呼び出し数の合計
  • Tool 呼び出し総数:Tool 操作の呼び出し数
  • LLM 呼び出し総数:モデル対話の呼び出し数。1 回のビジネスリクエストに複数回の LLM 呼び出しが含まれる場合があります
  • Skill 呼び出し総数:Skill の呼び出し数。Skill データが報告されていない場合は 0 と表示されます
  • トークン総量:入力、出力など各種トークンの使用量の合計
  • 1 回の LLM 呼び出しあたりの平均トークン数:トークン総量と LLM 呼び出し総数の比率
  • モデルプロバイダー分布:モデルプロバイダー別の LLM 呼び出し割合を表示
  • モデル呼び出し分布:モデル別の LLM 呼び出し数を表示
  • Tool 呼び出し分布:Tool 名別の呼び出し割合を表示
  • Skill 呼び出し Top 10:呼び出し数が多い上位 10 個の Skill を表示

概要カードと分布図は、現在の時間範囲におけるカウンター増分に基づいて計算され、当該期間内に実際に新規に発生した呼び出し数またはトークン使用量を表示します(カウンターの累積値ではありません)。

モデルとトークン

モデルとトークンモジュールは、モデル呼び出し数、トークン消費、呼び出しレイテンシの分析に使用します。

  • LLM 呼び出しトレンド:モデル別の LLM 呼び出し量の推移を表示
  • 入力/出力トークントレンド:トークンタイプ別の使用量の推移を表示
  • モデル別トークントレンド:モデル別のトークン使用量の推移を表示
  • LLM 呼び出しレイテンシパーセンタイル表:Agent タイプ別に LLM 呼び出し数と P50、P75、P90、P99 呼び出しレイテンシを表示

トレンドグラフは、ダッシュボードの自動時間間隔を使用して各時間帯の増分データを計算します。

Tool モジュール

Tool モジュールは、Tool のアクティブ数、呼び出しトレンド、レイテンシ、および異常状況を表示します。

  • アクティブ Tool 数:現在の時間範囲内で呼び出し数が 0 より大きい Tool の数
  • Tool 最大レイテンシ:現在の時間範囲内における Tool 呼び出しの最大レイテンシ
  • Tool 呼び出しトレンド:Tool 名別の呼び出し量の推移を表示
  • Tool 平均レイテンシ:Tool 名別の各時間間隔における平均呼び出しレイテンシを表示
  • Tool 異常 Top 10:異常呼び出し数が多い上位 10 個の Tool とその変化傾向を表示

Skill モジュール

Skill モジュールは、Skill のアクティブ数、呼び出しトレンド、レイテンシ、および異常状況を表示します。

  • アクティブ Skill 数:現在の時間範囲内で呼び出し数が 0 より大きい Skill の数。Skill データが報告されていない場合は 0 と表示されます
  • Skill 最大レイテンシ:現在の時間範囲内における Skill 呼び出しの最大レイテンシ。Skill 呼び出しがない場合はデータなしと表示されます
  • Skill 呼び出しトレンド:Skill 名別の呼び出し量の推移を表示
  • Skill 平均レイテンシ:Skill 名別の各時間間隔における平均呼び出しレイテンシを表示
  • Skill 異常 Top 10:異常呼び出し数が多い上位 10 個の Skill とその変化傾向を表示

関連情報

以下の内容にもご興味があるかもしれません:

フィードバック

このページは役に立ちましたか?