データオブザーバビリティジョブ¶
データオブザーバビリティ > ジョブ に移動すると、ジョブ一覧、実行ステータス分布、所要時間のトレンドを確認できます。ジョブの行をクリックすると、ジョブ詳細 に移動します。
検索とフィルター¶
上部の検索ボックスと左側のクイックフィルターを使用して、ジョブを検索できます。
ジョブ一覧¶
| フィールド | 説明 |
|---|---|
| ジョブ名 | データ処理ジョブの名前。 |
| インテグレーション | 収集されたインテグレーションまたは実行エンジン(例: Spark、Flink、dbt)。 |
| ステータス | 選択した範囲内での直近の実行ステータス。 |
| 実行回数 | 選択した範囲内での実行回数。 |
| 直近の実行 | 直近の実行時刻。 |
| 7日間成功率 | クエリの終了時点を基準とした、直近7日間のバッチジョブの実行成功率。 |
| 所要時間 | 直近に終了した実行の所要時間。 |
7日間成功率は、終了した実行総数に占める成功した実行数の割合を示し、バッチジョブに適用されます。終了した実行がない場合や該当しない場合は、この指標は利用できません。
実行統計¶
実行回数¶
積み上げ縦棒グラフは、成功、失敗、終了、実行中、不明を含む実行ステータスの分布を時系列で表示します。
グラフを使用して、異なる期間の実行結果を比較できます。ジョブページには終了していない実行も含まれますが、サマリーには終了した実行のみが集計されるため、両者で実行回数が異なる場合があります。
実行所要時間¶
平均所要時間(Avg)と P95、P90、P75 の曲線を表示し、全体の所要時間と遅い実行の変化を確認できます。
グラフの単位は、サンプルの所要時間に応じて秒または分で表示されます。軸とツールチップに表示される単位を基準としてください。
ステータスの説明¶
| ステータス | 意味 |
|---|---|
成功(COMPLETE) |
ジョブの今回の実行が正常に完了しました。 |
失敗(FAIL) |
ジョブの今回の実行が失敗しました。 |
中止(ABORT) |
ジョブの今回の実行が中止されました。 |
| 実行中 | 今回の実行の終了ステータスがまだ取得されていません。 |
| 不明 | 今回の実行のステータスを現在確認できません。 |
一覧のジョブステータスは、直近の実行結果を反映しています。他の実行のステータスを確認するには、ジョブ詳細の実行履歴に移動します。
ジョブ詳細¶
ジョブの行をクリックすると詳細が表示され、実行履歴、入力と出力、構成と変更、属性情報を確認できます。
ヘッダーサマリー¶
ヘッダーには、ジョブ名と利用可能なインテグレーション情報が表示され、リネージを表示 へのエントリが提供されます。サマリーには、直近の実行、所要時間、7日間成功率、入力と出力、ダウンストリームへの影響が含まれます。
- 直近の実行と所要時間: 直近の実行時刻と、直近に終了した実行の所要時間を確認します。
- 7日間成功率: 直近7日間の実行成功率と実行回数を確認します。
- 入力 / 出力: 関連する実行が読み取ったデータアセットと生成したデータアセットを確認します。
- ダウンストリームへの影響: 関連するダウンストリームの依存オブジェクトを確認します。
実行履歴¶
左側には実行リストが表示され、右側には選択した実行の詳細が表示されます。
実行の検索¶
- Run ID で検索するか、ステータスでフィルタリングします。
- 左側の実行レコードをクリックすると、右側に詳細が表示されます。リストはページングに対応しています。
| リストフィールド | 説明 |
|---|---|
| 開始時刻 | 実行の開始時刻。デフォルトでは開始時刻の降順で表示されます。 |
| ステータス | この Run の既知のステータス。 |
| 所要時間 | 今回の実行の開始から終了までの時間。 |
| 処理データ | 今回の実行で処理された行数、データサイズ、または出力アセット数。 |
| 遅延 | 実際の開始時刻と予定された開始時刻の差分。 |
| トリガー方法 | 今回の実行のトリガー方法。 |
処理データ、遅延、トリガー方法を表示するには、対応する情報収集を有効にする必要があります。対応するデータがない場合は「未報告」と表示されます。
実行詳細の表示¶
右側には、Run ID、ステータス、開始・終了時刻、所要時間、入力と出力、実行環境情報が表示されます。失敗した実行では、収集された内容に応じて、エラータイプ、エラーサマリー、失敗ステージ、再試行情報も表示される場合があります。
詳細内の操作からさらに分析を進められます:
- 入力と出力を表示: 入力と出力タブに切り替え、同じ実行を選択します。
- ダウンストリームへの影響を表示: 現在のジョブを基準に、2階層下のダウンストリームの関係を確認します。
入力と出力¶
このタブには、1回の実行で読み取られたデータアセットと生成されたデータアセットが表示されます。上部には実行時刻、Run ID、ステータスが表示され、Run を選択 で実行を切り替えられます。
| エリア | 内容 |
|---|---|
| 入力データ | 今回の実行で読み取られたデータアセット、および読み取られた行数またはサイズ。 |
| 出力データ | 今回の実行で生成されたデータアセット、および出力された行数またはサイズ。 |
データアセットをクリックすると、データアセット詳細 に移動します。入力、出力、または処理量の情報がない場合は、対応するエリアに「未報告」と表示されます。
今回のリネージを表示 をクリックすると、選択した実行の直接の入力・出力関係が表示されます。このとき、方向は上流・下流に固定され、階層は1階層に固定されます。
実行によって、読み取りまたは生成されるデータアセットは異なる場合があります。入力と出力の行数とサイズは、今回の実行の読み取り・書き込み量を示します。
構成と変更¶
実行エンジン、バージョン、実行パラメータ、アダプター情報と、隣接する実行間の構成変更を確認できます。
変更履歴には、時刻、変更タイプ、構成項目、変更前後の値、ソースが含まれます。レコードをクリックすると右側に詳細が表示されます。現在の Run を表示 をクリックすると、実行履歴に戻り、対応する実行を特定できます。
失敗を調査する際は、構成の変更、実行結果、エラー情報を組み合わせて分析できます。
属性情報¶
基本情報、スケジュール情報、収集情報ごとにジョブ属性を確認できます。これには、Namespace、ジョブタイプ、処理タイプ、インテグレーション、スケジューラー、スケジュール周期などが含まれます。具体的な表示内容は、収集された情報によって異なります。