# 流水线

该模块用于串联Octopus数据平台中的各个作业,从数据批次上云到自动触发数据处理、场景挖掘等流程,并实时同步各作业运行状态。支持用户自定义创建流水线模板,结合实际需求选取适合的作业流程。

# 创建流水线模板

  1. 单击“数据服务>流水线>流水线模板> 新建模板” 创建模板。

  2. 填写流水线模板信息。

    • 模板名称:支持中英文、数字、“-”和“_”,不支持特殊字符,不超过64个字符;
    • 拓扑图:为流水线选取需要的作业流程。可以单击拓扑节点下方的“+”或下方的“-”快速增删作业;

    说明: 拓扑图当前支持的全部作业流程如下图所示,支持用户自定义增删作业,不支持改变作业顺序。

  3. 单击 “创建” 完成模板创建。

  4. 查看流水线模板

    模板成功创建后,单击指定“模板名称”,可查看对应流水线模板详情。

# 查看流水线实例

创建流水线模板后,需要在“车辆管理”中指定流水线模板,具体方法请参考车辆管理。该车辆源数据成功上传Octopus平台后,后台将自动触发流水线实例创建和运行。流水线实例触发创建后,可以在流水线模块下查看所选取的数据服务全生命周期流程。流水线实时监管作业进度,同步作业状态,通知作业运行。

在Octopus控制台数据服务菜单栏,单击“流水线>流水线实例”查看流水线实例列表。找到想要查看的“数据包ID”,单击“流水线ID”左侧“+”,查看流水线实例详情。

# 查看错误日志

若流水线运行异常,查看异常作业和原因,根据提示寻找合适的解决办法后,重启作业。

# 重启流水线实例

单击指定流水线实例下的“重启流水线”,重启整个流水线;

注意:

  • 重启后状态不可恢复,请谨慎操作;
  • 若流水线处于“运行中”状态,不可重启。
上次更新: 2020/12/25 16:26:48