阿里云文档 2025-05-14

新版数据开发中复杂依赖场景调度配置原则与示例

DataWorks支持分钟、小时、日、周、月、年等类型的调度任务互相依赖,调度类型不同,任务执行的周期数不同。任务各周期是通过实例的方式执行,当上下游调度依赖的类型不同时,您可通过该文档了解上下游各周期实例如何挂载依赖,即上下游任务不同周期实例的依赖情况。

阿里云文档 2025-03-31

系统设置

若您的任务需要周期性运行,则在配置任务的调度属性前,需要先进入Data Studio的调度设置页面开启调度功能,开启后,周期任务的调度配置才会生效。同时,DataWorks支持设置周期任务默认使用的资源组,支持设置任务的默认重跑属性、重跑次数、重跑时间间隔。

阿里云文档 2025-01-16

DataWorks调度Spark

DataWorks提供全链路大数据开发治理能力,支持包括AnalyticDB在内的多种计算引擎。DataWorks数据开发(DataStudio)模块支持工作流可视化开发和托管调度运维,能够按照时间和依赖关系轻松实现任务的全面托管调度。您可以在DataWorks中通过ADB Spark SQL和ADB Spark节点开发和调度Spark作业(Spark SQL作业和Spark应用作业)。

阿里云文档 2024-11-13

使用分支节点实现同天两种调度频率执行单个任务

分支节点是DataStudio中提供的逻辑控制系列节点之一。本文将为您介绍通过DataStudio中提供的分支节点(逻辑控制系列节点之一),实现单个任务在业务量处于较高水平时报表任务延迟产出;业务量较低时,报表即时产出的业务需求。

问答 2024-07-15 来自:开发者社区

DataWorks在生产环境将调度任务下线了,如何重新恢复上线,开发环境的节点未删除怎么办?

DataWorks在生产环境将调度任务下线了,如何重新恢复上线,开发环境的节点未删除,但是无法提交,稍微修改下原节点可以提交,但是提交后调度任务下载代码失败?

问答 2024-03-13 来自:开发者社区

在阿里云OpenAPI要下线DataWorks生产环境某个调度任务,是使用OfflineNode吗?

在阿里云OpenAPI要下线DataWorks生产环境某个调度任务,是使用的OfflineNode接口吗?我测试后发现只能下线按日执行的任务,按月执行的调度任务,没有查到对应的节点,也就无法下线该任务,

问答 2024-03-11 来自:开发者社区

要下线DataWorks生产环境某个调度任务,是使用的OfflineNode接口吗?

要下线DataWorks生产环境某个调度任务,是使用的OfflineNode接口吗?我测试后发现只能下线按日执行的任务,按月执行的调度任务,没有查到对应的节点,也就无法下线该任务?

问答 2023-12-10 来自:开发者社区

DataWorks发布到生产环境的任务,可以暂停调度,只通过补数据生产实例吗?

DataWorks发布到生产环境的任务,可以暂停调度,只通过补数据生产实例吗?

问答 2023-11-20 来自:开发者社区

DataWorks有个生产环境dwd层的SQL任务,运维中心看一直都是正常调度的,这是什么情况?

DataWorks有个生产环境dwd层的SQL任务,运维中心看一直都是正常调度的,但是从10月22号起的分区就没有数据了,但是手动补数据就又有了,这是什么情况?就是从22号以后,自动调度的任务在各日期分区都没有数据,非要手动补一遍才有?

问答 2023-10-22 来自:开发者社区

DataWorks如何配置生产环境自动调度后的调度参数?

DataWorks如何配置生产环境自动调度后的调度参数?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks调度相关内容

大数据开发治理平台 DataWorks更多调度相关

产品推荐

DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。作为阿里巴巴数据中台的建设者,DataWorks从2009年起不断沉淀阿里巴巴大数据建设方法论,同时与数万名政务/金融/零售/互联网/能源/制造等客户携手,助力产业数字化升级。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等