文本数据处理简介¶

DataKit 支持通过 Pipeline 对采集到的数据进行自定义的修改，通过这些修改，我们能更细粒度的结构化采集到的数据，更便于在页面上对数据进行管理。

Pipeline 主要特点：

• Pipeline 运行在 DataKit 上，是一种轻量化的脚本语言
• Pipeline 提供丰富的函数，以支持对常见数据的标准化操作（比如解析时间字符串，补全 IP 地址地理信息等）
• 在观测云工作空间页面中能直接编写 Pipeline 脚本，便于 Pipeline 调试和批量生效