数据目录¶
进入数据可观测 > 数据目录,集中查看已采集的数据资产。您可以搜索和筛选数据资产,再进入详情查看字段结构与上下游关系。
数据目录中的每一行代表一个数据资产。作业及其运行历史在作业中查看。
搜索与筛选¶
您可以通过顶部搜索框搜索数据资产,或按页面提示选择字段和值进行筛选。搜索语法参见搜索。
您也可以通过左侧快捷筛选查找数据资产。
列表字段¶
| 字段 | 说明 |
|---|---|
| 数据资产 | 数据资产名称。点击行进入资产详情。 |
| 类型 | 已识别的资产类型;无法确认具体类型时显示 Dataset。 |
| 数据平台 | 数据资产所属的平台。 |
| 状态 | 最近关联运行的状态。 |
| 最近观察 | 最近一次采集到该数据资产信息的时间。 |
| 直接下游 | 当前范围内已采集的直接依赖对象数量。 |
通过显示列可调整列表展示内容,包括 Namespace、最近关联运行、生命周期和 Schema 字段等。
资产类型包括表、视图、物化视图、Topic、Stream、文件及通用 Dataset。
列表中的状态反映关联作业的运行结果,不表示数据质量检查结果。
查询无匹配结果时,可先清空筛选;若仍无数据,请检查数据资产的采集配置。
数据资产详情¶
点击数据资产行进入详情,查看概览、Schema、数据血缘、相关作业和扩展属性。
页面头部展示名称、类型和关联状态。点击刷新重新查询当前详情;点击查看完整血缘,以当前资产为锚点进入数据血缘。
摘要信息¶
| 信息 | 说明 |
|---|---|
| 最近观察 | 所选范围内最近一次采集到资产信息的时间。 |
| 最近关联运行 | 最近一次关联运行的状态。 |
| 输入 / 输出关系 | 与当前资产直接相关的读写关系。 |
| Schema 字段 | 已上报 Schema 中的字段数量。 |
| 本次输出行数 | 关联运行输出的行数。 |
“关联正常”“关联异常”或“关联运行中”等状态反映最近一次关联运行的结果。字段数量和输出行数需要启用对应的信息采集。
概览¶
运行记录¶
展示当前资产的最近关联运行,包含开始时间、作业、关系、状态、耗时和输入输出数量。
关系用于说明该资产如何参与运行:
- 输入(INPUT):作业读取当前资产。
- 输出(OUTPUT):作业产出当前资产。
点击运行记录可进入对应作业查看运行详情。点击查看全部运行可打开当前资产的关联运行页面。
直接关系¶
展示当前资产与生成作业、消费作业及直接相关数据资产的关系。点击其中的资产或作业,可以继续查看对应详情;需要扩展关系范围时,点击查看完整血缘。
已采集信息¶
展示数据平台、资产类型、Schema、字段血缘、统计和质量信息的采集情况。
- 已上报:已获取对应信息。
- 未上报:尚未获取对应信息。
- 解析不完整:已获取部分信息,明细不完整。
Schema¶
Schema 页签展示字段名、类型、描述和字段血缘。
字段血缘标记为已上报时,可以展开查看上游字段、来源资产、转换信息及脱敏标记。
如果页面提示“Schema 未上报”或“Schema 明细不可用”,请检查字段结构的采集配置。需要查看字段来源时,还需启用字段血缘采集。
数据血缘¶
在当前资产详情中查看上下游血缘预览,可调整方向和层级,并查看关系详情。需要继续搜索其他锚点或扩大排查范围时,点击查看完整血缘。
例如,当前数据资产 → 消费作业 → 输出数据资产,是两层关系。
相关作业¶
展示与当前资产相关的作业,以及读写关系、最近运行时间、状态和最近成功时间。点击作业进入作业详情。
需要查看作业的每次执行时,可进入运行历史。
扩展属性¶
查看资产名称、Namespace、类型、数据平台和采集来源等属性。可在属性行中复制可用的值,具体展示内容取决于已采集的信息。
关联运行¶
在概览中点击查看全部运行,进入当前资产的关联运行页面。
- 在顶部按作业名称或 Run ID 搜索,也可以筛选运行状态。
- 在左侧列表选择一条运行记录,右侧展示运行详情。
- 查看作业、读写关系、开始结束时间、耗时、输入输出和错误信息。
- 点击查看下游影响,以当前资产为锚点进入下游血缘分析。
- 点击返回,回到资产详情。
输入行数和输出行数表示单次运行的读写量。比较统计时,请同时确认运行记录、读写方向和计量单位。