You need to enable JavaScript to run this app.
文档中心
大数据研发治理套件

大数据研发治理套件

请输入
  • 文档首页
    • 大数据研发治理套件用户指南数据开发 - New IDE运维监控Pipeline 实例管理
复制全文
下载 pdf
我的收藏
运维监控
Pipeline 实例管理
复制全文
下载 pdf
我的收藏
Pipeline 实例管理

Pipeline 每次被调度或手动触发运行时，都会生成一个实例，记录该次运行的所有状态、日志、各节点的执行情况等。本文为您介绍 Pipeline 实例的查看、管理与运维操作。

前提条件

已发布 Pipeline 任务，具体操作请参见开发到生产的工作流程。

实例状态

Pipeline 实例在生命周期中可能经历以下状态，更多介绍请参见Pipeline 状态说明：

状态

说明

待运行

实例已创建，等待调度时间到达或资源分配。

运行中

Pipeline 正在执行，至少有一个节点在运行。

成功

所有节点执行成功，Pipeline 正常完成。

失败

至少一个节点执行失败（重试后仍失败）。

已取消

手动终止。

进入实例运维页面

  1. 登录 DataLeap 控制台，进入 New IDE 项目平台。
  2. 选择工作流运维 > 运行实例，进入运行实例页面。
    Image

搜索实例

运行实例支持近期实例和全量实例两种查询模式，默认展示近期实例。

  • 近期实例：适用于高频运维操作，可查询最近 3 个月的实例。若需查看最新操作或实例状态变化，建议使用该模式。
  • 全量实例：选择业务时间后，单击查询全量实例按钮，可查看对应范围内的全部实例。查询结果可能存在分钟级延迟。

在两种查询模式下，均可通过以下方式快速定位指定的 Pipeline 运行实例：

  • 筛选：支持按业务时间、工作流类型、运行状态、定时时间、调度类型、优先级、周期、调度资源等条件筛选。
  • 搜索：支持按名称关键词或 Pipeline ID 搜索。
  • 重置：清除所有筛选条件，列表恢复展示项目下默认时间范围内的实例。
  • 快速筛选：勾选我是责任人，即筛选出当前账号作为责任人的 Pipeline 实例。

Image

查看实例详情

单击某条信息的实例详情按钮，进入实例详情页面，可以查看 Pipeline DAG 的执行状态、操作记录、日志等信息，并执行重跑、置成功、查看工作流等操作。
Image

功能

操作说明

执行详情

单击执行详情页签，可查看并管理该实例执行的详情信息。支持 DAG 视图和列表视图两种展示方式，分别如下：

  • DAG 视图
    • 单击选中某个节点后，可以查看相应节点的执行详情和执行日志。
    • 在节点的日志栏，可输入关键词搜索定位该节点的日志信息，还可勾选只看Error，查看错误日志信息。
    • 右键 DAG 节点，可根据该节点当前的运行状态，分别执行重跑、置成功、跳过等操作。

      说明

      每次重跑后，在日志栏都会生成一个新的执行日志，可单击相应页签进行查看。

  • 列表视图
    可查看该实例的节点列表，并可以对 Pipeline 的各节点分别执行重跑、置成功、跳过、查看日志等操作。

操作记录

单击操作记录页签，可查看该实例在运维过程中的操作记录列表。

调度日志

单击调度日志页签，可查看该实例的调度日志，并执行以下操作：

  1. 可设置搜索信息，查找所需的调度日志。
    • 可勾选只选Error，查看错误日志信息。
    • 通过编辑器内置的文本查找工具栏，可在当前日志页面中进行关键词搜索定位。
      • Find 输入框：输入要查找的关键词，即可在日志内容中高亮匹配项。

        说明

        选中输入框后，显示的 ↕ for history 表示按电脑的上下箭头可以调出之前搜索过的历史关键词。

      • Aa：选中后，搜索会区分大小写。
      • ab (带下划线)：选中后，只匹配完整单词。
      • .*：选中后，输入框中的内容将被视为正则表达式进行匹配。
      • ↑ ↓：​用于在多个匹配项之间逐个跳转。
  2. 单击下载日志按钮，可下载当前显示的调度日志信息。
    Image

执行日志

单击执行日志页签，可查看该实例的执行日志，并执行以下操作：

  1. 可设置搜索信息，查找所需的执行日志。
    • 通过执行时间、日志级别的筛选项进行日志筛选。
    • 通过编辑器内置的文本查找工具栏，可在当前日志页面中进行关键词搜索定位。
  2. 单击下载日志按钮，可下载当前显示的执行日志信息。

其他操作

  • 查看工作流：单击查看工作流按钮，可以跳转到该 Pipeline 的详情页面，查看 Pipeline 的执行情况。
  • 查看配置文件：单击查看配置文件按钮，可以查看该 Pipeline 的配置文件。

重跑操作

在实例列表页面或实例详情页面，可通过以下操作进行重跑：

  1. 单击某条信息的重跑按钮，在实例重跑窗口中，选中需要重跑的一个或多个节点作为重跑起点。选中节点后，其下游节点也会自动被选中。当该节点重跑后，会依次重跑下游节点。
    Image
  2. 若所选重跑范围外存在上游依赖阻断，则需单击纳入范围按钮，将阻断上游纳入范围内。
  3. 输入重跑原因。
  4. 当实际范围包含成功节点时，还需勾选提示信息，确认重跑风险。
  5. 单击确认重跑按钮，即可重跑所选节点。

说明

  • 除了待运行状态的实例之外，其他状态的实例均支持重跑。
  • 中性跳过节点不能作为重跑起点。
  • 如果失败的实例在重跑之前已调整了 Pipeline 配置并重新发布，则重跑和后续未运行的实例均会使用最新的配置来运行任务。

其他操作

  • 去开发
    单击某条信息的 ... > 去开发按钮，可以跳转到该 Pipeline 的编排页面，修改 Pipeline 的配置。修改 Pipeline 的具体操作可参见创建与编辑 Pipeline。
  • 置成功
    单击某条信息的 ... > 置成功按钮，在弹出的窗口中，二次确认后，可以将该实例的状态置为成功。

    说明

    支持对以下状态的实例执行置成功操作：

    • 尚未运行结束的实例：停止实例运行，实例状态变为成功。
    • 已失败或停止的实例：实例状态从失败/停止变为成功。
  • 终止
    单击某条尚未运行结束的实例信息的 ... > 终止按钮，二次确认后，可以停止实例运行。停止后，实例状态变为停止。
  • 操作记录
    单击某条信息的 ... > 操作记录按钮，进入该实例的操作记录页面，可以查看该实例的操作记录列表。
最近更新时间：2026.09.18 12:06:04
这个页面对您有帮助吗？
有用
有用
无用
无用