大数据云平台
计算资源
云服务器(KEC)
裸金属服务器
弹性伸缩(AS)
GPU云服务器
GPU裸金属服务器
容器服务(KCE)
专属宿主机(KDH)
容器实例
云函数
容器镜像服务
云监控
云监控
游戏服务
金山云云游戏平台
开发者工具
Terraform
CLI
管理与审计
访问控制
操作审计
资源管理
网络
经典型负载均衡(SLB)
虚拟私有网络(VPC)
弹性IP(EIP)
共享带宽(BWS)
VPN连接
对等连接
云企业网
应用型负载均衡(ALB)
大数据
托管Hadoop(KMR)
数据仓库(KDW)
大数据云平台
托管kafka
Elasticsearch服务
日志服务
商业智能分析
云数据仓库ClickHouse
应用服务
API网关
用户中心
网站备案
账号管理
费用中心
API签名指南
数据库
关系型数据库(KRDS)
云数据库Redis(KCS)
云数据库MongoDB
分布式数据库服务
云数据库Memcached
数据传输服务
云数据库KingDB
时序数据库InfluxDB
云安全
高防IP(KAD)
DDoS原生高防
服务器安全(KHS)
Web应用防火墙(WAF)
密钥管理服务
SSL证书管理
云安全管理中心
业务风险情报
应急响应
应用中间件
应用服务网格
其它
法律条款
存储与云分发
CDN
对象存储(KS3)
云硬盘(EBS)
边缘节点计算
文件存储KFS
全站加速
在线迁移服务
视频云服务
云直播(KLS)
云转码(KET)
金山云魔镜
消息队列
消息队列RabbitMQ
人工智能
人工智能平台(King-AI)
合作与生态
云市场
合规性
资质认证
安全帮助中心
欧盟数据保护条例(GDPR)
产品简介
产品概述
行业场景和资源
产品优势
产品功能
管理控制台
我是企业管理人员,如何使用大数据云平台
我是开发人员,如何使用大数据云平台
我是数据资产管理人员,如何使用大数据云平台
数据集成
产品概述
名词解释
行业场景和资源
产品优势
产品功能
操作指南
数据同步
数据同步-源表选择及其设置
数据同步-目标表选择及其设置
数据同步-源表与目标表映射
数据加工
数据加工-算子
数据整合
业务检核
常见问题
离线计算
产品概述
行业场景与资源
产品优势
产品功能
操作指南
作业开发
作业开发——以 Spark SQL为例
作业设置
开发辅助功能
作业开发
作业设置
开发辅助功能
常见问题
运维中心
运维中心概述
任务运维
组件实例
常见问题
数据采集
产品概述
行业场景与资源
产品优势
产品功能
操作指南
库表创建
流式采集
流式采集-流式Agent采集
流式采集-API采集
流式采集-流式数据库采集
流式采集-批量创建流式数据库采集
任务上线申请与生产运行
流式投递
批量采集配置
子账号数据采集权限配置
OGG插件
常见问题
流计算
产品概述
名词解释
行业场景与资源
产品优势
权限说明
操作指南
进入项目
创建数据源和Topic
申请数据权限
流计算作业开发-在线开发模式
流计算作业开发-自定义开发模式
产品功能
测试与运行
常见问题
数据管理
产品概述
行业场景与资源
产品版本
产品优势
操作指南
新建数据源
跨VPC网络管理
数据库创建及发布
数据表创建及发布
标签管理
业务元数据管理
数据关联配置
数据搜索
数据目录
数据分布
数据血缘关系
数据质量
数据权限管理
产品功能
常见问题
数据服务
产品简介
行业场景与资源
产品优势
产品功能
配置管理
策略管理
服务配置
调用统计及明细
常见问题
操作指南
服务管理
API分页说明
服务发布
API调用说明
应用及授权管理
自定义函数
API开发
OpenAPI
数据采集OpenAPI
常见问题
文档中心
大数据云平台
离线计算
操作指南
作业开发
作业开发
最近更新时间:2023-06-16 11:46:59
查看PDF
本文介绍作业开发具体操作。
操作步骤
新建作业流
前置条件:用户有权限在项目下新建作业流且同一个项目下作业流名称不能重复。
操作步骤:用户任务开发页面下选中一个文件夹,在文件夹下新建作业流,填写作业流描述,点击
确认
。
编辑作业流
前置条件:存在的一个开发态的作业流。
操作步骤:作业开发人员拖拽插件,连线形成作业流,并配置作业流的全局参数, 依赖配置,调度配置。
测试作业流
前置条件:已经存在的一个开发态的作业流。
操作步骤:
(1)用户在作业流编辑页面,点击
保存
,保存作业流。
(2)用户作业流编辑页面,点击
测试
,将作业流提交给调度在测试环境测试。
提交作业流
前置条件:已经存在的一个开发态的作业流。
操作步骤:
(1)用户在作业流编辑页面,点击
提交
,提交作业流。
(2)进入到运维中心的【任务管理】界面找到相应的计算作业,进行作业流的发布。
发布作业流
前置条件:作业流已经保存生成版本。
操作步骤:开发人员在发布列表中选中一条已提交的作业流,点击发布申请,项目管理员审批通过后会将作业流信息提交到智能调度。
立刻执行作业流
前置条件:作业流处于已发布状态并通过审批。
操作步骤:用户在发布列表中选中一条已发布的作业流,点击立即执行,选中要执行的批次号,数据开发会将作业流的配置信息上传到智能调度。
删除作业流
前置条件:已经存在的一个开发态的作业流,且该作业流处于未发布或已下线状态。
操作步骤:
(1)用户在作业流编辑页面选中一条作业流。
(2)右键删除操作,如果该作业流有实例在运行,则删除失败,如果无实例运行,删除成功。
新建作业
前置条件:已经存在的一个开发态的作业流。
操作步骤:用户在作业流编辑页面选中一条作业流。拖拉拽一个插件新建一个作业。
编辑作业
前置条件:已经存在的一个开发态的作业流并且里面包含作业。
操作步骤:
(1)用户在作业流编辑页面选中一条作业流。
(2)在作业流里选中一个作业节点,双击编辑业务。
(3)进行作业参数属性配置,作业依赖配置。
删除作业
前置条件:已经存在的一个开发态作业流,里面包含一个或多个作业节点,并且作业流处于非运行态。
操作步骤:用户选中一条作业流进入作业流编辑页面,选中作业流的某个作业,右键或者直接点击作业右上角的
×
进行删除。
新建文件夹
前置条件:已经存在项目可用的项目空间。
操作步骤:进入任务开发界面,点击
新建文件夹
,弹出新建文件夹页面,填写文件夹名称后保存,创建完成。
删除文件夹
前置条件:已经存在的文件夹,并且文件夹下的作业流都是未发布状态。
操作步骤:选中文件夹,右键删除操作,提示是否要删除文件夹和下面的作业流。
更新作业流
前置条件:作业节点新编辑保存过。
操作步骤:用户双击作业流,进入编辑页面,点击提交按钮,选择有内容变化的节点进行提交。提交成功后,选中的节点版本会增加1,作业流的版本也会递增1。
单节点作业测试
操作步骤:在开发作业流过程中,选中一个要执行的作业节点,点击在线测试按钮,作业会提交到智能调度测试。
新建解决方案
操作步骤:点击
新建解决方案
,输入名称,选择创建的工作流完成解决方案的创建,建的解决方案会存放在名为【解决方案】的文件夹下。
解决方案更新
操作步骤:点击新建的解决方案,进入解决方案内部,可对解决方案进行更新操作,更新解决方案名称、描述和当前解决方案包括哪些工作流。
上一篇:产品功能
下一篇:作业开发——以 Spark SQL为例
文档内容是否对您有帮助?
根本没帮助
文档较差
文档一般
文档不错
文档很好
在文档使用中是否遇到以下问题
内容不全,不深入
内容更新不及时
描述不清晰,比较混乱
系统或功能太复杂,缺乏足够的引导
内容冗长
更多建议
0/200
评价建议不能为空
登录后提交
提交
提交成功!
非常感谢您的反馈,我们会继续努力做到更好!
问题反馈