本文由【云老大】 TG@yunlaoda360 撰写
1. 开启调度功能
进入 DataWorks 控制台,切换至目标地域,找到工作空间并点击操作列的“进入数据开发”,在左侧导航栏点击设置图标,进入调度设置页面,开启“启用调度周期”开关。
2. 配置任务调度属性
- 进入调度配置页面 :在 DataStudio 界面找到目标节点,进入其编辑页面,点击右侧导航栏的“调度配置”。
- 设置调度周期 :在调度配置页面设置任务的调度周期,如定时调度的时间(精确到分钟)和频率(如每天、每月等间隔)。对于复杂场景,如小时任务依赖天任务或天任务依赖其他任务等,需根据具体需求设置调度周期和依赖关系。
- 设置实例生成方式 :可选择“T+1 次日生成”(节点发布后第二天自动调度)或“发布后即时生成”(节点发布后当天自动调度,但需注意定时时间和发布时间的关系)。
3. 配置任务依赖关系
- 基于血缘配置依赖 :明确表的血缘关系后,根据血缘关系确定调度依赖的配置方式,如同周期依赖或依赖上一周期。
- 可视化配置依赖 :在业务流程 Workflow 中,通过拖拽节点来配置上下游依赖关系。
4. 设置调度参数
在节点编辑页面的工具栏点击相应图标,保存并提交节点配置。可以通过配置业务时间来模拟节点的调度周期进行测试。任务实际运行时,调度参数会根据业务日期、定时时间及参数的取值格式自动替换为具体值。
5. 发布任务
在节点编辑页面点击“发布”,将任务发布至生产环境。只有发布后的任务才会根据调度配置自动运行。
6. 查看和管理调度任务
进入运维中心,搜索目标节点,查看节点的调度参数配置和执行参数。还可以在周期实例页面查看任务的执行情况。
DataWorks 提供了丰富的调度功能,通过以上步骤,你可以灵活地配置和管理任务的调度流程,实现高效的数据处理和任务自动化。