全部文档
当前文档

暂无内容

如果没有找到您期望的内容,请尝试其他搜索词

文档中心

组件实例

最近更新时间:2023-06-16 11:46:58

运维中心支持离线计算、流计算、数据采集、图计算、数据挖掘、数据服务、数据管理等多个组件的实例运行管理。以离线计算为例说明实例管理功能。

生产实例

(1)离线计算-作业流实例
用户可以在此页面查看作业流实例运行情况,并对作业流实例进行相关操作。除【查看DAG】操作外,其他操作均需先通过复选框选中待操作作业流对象后才能进行操作。

  • 作业流删除

从作业流实例及此作业流下所有作业实例数据库中删除,删除后页面将不可见,也不可恢复。仅处于【完成】、【失败】状态的作业流才可以。

  • 启用翻牌

启用翻牌,作业流执行完成以后自动根据条件实例化下一业务日期的作业流。

  • 暂停翻牌

停止翻牌,作业流执行完成后不再实例化下一业务日期的作业流,但当前已经实例化的作业流会继续执行完。仅处于【运行中】、【未就绪】状态的作业流才可以【暂停翻牌】。

  • 终止

终止作业流实例。正在执行的作业被强制结束,未执行的作业被取消。仅处于【运行中】的作业流才可以被终止。

  • 查看DAG

点击查看DAG,跳转到作业流实例的运行DAG页面。

页面以流图的形式展示了作业流中各个作业关联关系,并用颜色标注了作业状态。

  • 依赖项检查

点击作业流实例依赖项检查,跳转到作业流实例的依赖项页面。

(2)离线计算-作业实例
用户可以在此页面查看作业实例运行情况,并对作业实例进行相关操作。除【查看日志】操作外,其他操作均需先通过复选框选中待操作作业流对象后才能进行操作。

  • 作业重跑

作业处于【终止】、【成功】或【失败】时,可以选中作业,点击此按钮让作业实例再次运行。

  • 作业挂起

作业处于【未就绪】、【就绪】、【等待】、【已派发】时,可以选中作业,点击此按钮让作业实例在条件全部具备的条件下也不被执行。页面中作业实例挂起状态变为【挂起】。

  • 作业解挂

解除作业【挂起】状态,页面中作业实例挂起状态变为默认的【非挂起】状态。

  • 作业强制成功

把作业状态强制置为【成功】,此过程中作业不会被执行。非【运行中】状态的都可以执行【作业强制成功】操作,此功能主要用于触发依赖于此作业的下游作业执行。

  • 作业优先级调整

作业派发过程中会根据作业优先级进行派发,调整作业优先级可以使作业被优先派发执行。作业优先级一共有5级,数字越大优先级越高,其中第5级设置只对项目管理员开放,以方便临时加一些需紧急执行的作业。作业处于【未就绪】、【就绪】、【等待】或【取消】状态时可以调整作业优先级。

  • 作业终止

终止作业可让正在运行的作业强制结束,让还未执行的作业不再执行。

  • 日志

点击作业列表右侧日志可以查看作业运行日志。
跳转到作业实例日志页面。

  • 依赖项检查

点击作业列表右侧依赖项检查,查看作业实例运行的依赖项。作业实例的依赖项包括【作业流】、【作业依赖】、【外部依赖】三种依赖。

测试实例

“测试实例”与“生产实例”的功能、页面、操作完全一样,区别仅在于“测试实例”里的任务在测试环境运行,且“开发人员”角色可以进行所有操作。

事件补发

当作业/作业流因为某些原因需要进行外部依赖的手动补发时,可以在【事件补发】页面进行统一的补发操作。
补发分为输入和输出两个方向的补发操作。

  • 当用户选择【输入】方向补发时,可补发的对象包括作业流和作业。

  • 当选择补发方向为【输出】时,可补发的对象包括外部事件、作业流、作业。

作业临时重跑

点击作业临时重跑,选择项目空间,在目录中找到要操作的作业拖拽至右侧,勾选要重跑的作业,选择执行次数和业务日期,填写批次号,点击运行

诊断分析

诊断分析功能主要确定作业/作业流中在运行是有哪些异常以及使用血缘分析来确定异常的事件影响范围有多大。

(1)异常诊断

进程出现异常时用户可通过异常诊断页面对问题进行排查
点击诊断分析 > 异常诊断

选择项目和作业流,点击全面诊断,列出目前针对作业流进行的诊断项。

当诊断某项诊断有异常时,会在诊断结果中标显示,可以点击有异常,进行详细异常原因查看。

(2)血缘分析

点击血缘分析,选择作业维度或作业流维度,以作业为例,依次选择项目 > 作业流 > 作业名称,输入父、子节点数查看上、下依赖关系。
双击屏幕上的某个节点可以转换到以该节点为中心进行查看。

运营配置

(1)逻辑资源组
进入【调度配置】,选择逻辑资源组配置查看列表,显示逻辑资源组队列以及当前逻辑资源组逻辑资源总量、使用量和剩余量。

点击添加逻辑资源组,创建新的逻辑资源组。设置资源组名称、总量和是否生效等。

对于列表中的资源组可以点击进行修改

(2)周期日历设置

进入【周期日历设置】查看列表,显示目前系统支持的所有的调度周期。类型为【公共设置】的是系统默认设置周期日历,用户自己添加的类型为【自定义】。

点击周期日历设置按钮浏览上传本地文件进行添加,新建一个调度周期日历。

已经添加的日历可以通过对应按钮进行【修改】、【查看】、【下载】操作。

  • 点击修改跳出修改弹窗。用户重新上传日历文件,进行周期日历的修改。

  • 点击查看按钮,显示当前周期日志中的日期设置。

  • 点击下载按钮,将当前周期日历已表格形式下载到本地。

文档导读
纯净模式常规模式

纯净模式

点击可全屏预览文档内容
文档反馈