阿里云文档 2025-04-01

优雅下线表和任务

对于数据治理过程中的无效任务或表,数据资产治理为您提供完整的下线方案,包含下线风险评估、下线通知推送、下线过程管理等全流程功能,为您解决人工识别下线风险、任务存在正常调度的下游任务时不能下线、因无法预知风险而不敢轻易下线等问题,同时提供批量下线功能,方便统一管理和执行,为您提升下线效率。

阿里云文档 2025-03-31

查看任务运行历史记录

DataWorks的运行历史面板展示您最近三天在数据开发界面的任务执行记录。

阿里云文档 2025-03-14

新版Data Studio任务发布

本文为您介绍如何通过发布流程将任务的新增、更新、删除操作发布至生产环境。

阿里云文档 2025-02-28

创建PyODPS 2节点任务

DataWorks提供了PyODPS 2节点类型,允许您使用PyODPS语法在DataWorks平台上开发PyODPS任务。PyODPS集成了MaxCompute的Python SDK,使您能够在PyODPS 2节点上直接编写和编辑Python代码来操作MaxCompute。

阿里云文档 2025-02-14

基于自建Hadoop集群进行自定义CDH镜像

本文为您介绍如何在DataWorks绑定自建 Hadoop 集群并进行任务开发,以及如何自定义自建集群运行环境。

问答 2024-08-14 来自:开发者社区

大数据计算MaxCompute的任务依赖调度问题。调度任务起来的时候,是如何形成依赖链的?

大数据计算MaxCompute的任务依赖调度问题。调度任务起来的时候,是如何形成依赖链的。当所有任务都是天调度,中间有一部分需要小时调度,会怎么样。这个是问您还是问datawork群里的人?

问答 2024-07-17 来自:开发者社区

MaxCompute odps天任务依赖小时任务

问题描述MaxCompute odps天任务依赖小时任务,天任务是当天跑昨天数据,昨天的数据都是小时任务。发现昨天的小时任务还没完全跑完,天任务就已经开始运行了,导致天任务获取的数据不完整。期望结果昨天的00-23,24个小时分区数据运行完成之后,天任务再运行。保证天任务的数据是完整的。已尝试的方法...

问答 2024-06-25 来自:开发者社区

在大数据计算MaxCompute中未发布但是提交的etl任务可以按照依赖调度不?

在大数据计算MaxCompute中未发布但是提交的etl任务可以按照依赖调度不?

文章 2022-02-16 来自:开发者社区

【大数据开发套件调度配置实践】——不同周期任务依赖配置

大数据开发过程中常遇到不同运行周期的任务进行依赖,常见 天任务依赖小时任务、 小时任务依赖分钟任务 。那么如何通过大数据开发套件开发这两种场景呢? 本文将从这两个场景出发,结合调度依赖/参数/调度执行等,介绍不同周期调度依赖的最佳操作实践。 再此之前,我们先明确几个概念: 业务日期:业务数据产生的日期,这里指完整一天的业务数据。在大数据开发套件里任务每天能处理的最近的完整一天业务数据是昨天的数.....

【大数据开发套件调度配置实践】——不同周期任务依赖配置

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生大数据计算服务 MaxCompute任务相关内容

云原生大数据计算服务 MaxCompute更多任务相关

云原生大数据计算服务 MaxCompute您可能感兴趣

产品推荐

大数据计算 MaxCompute

MaxCompute(原ODPS)是一项面向分析的大数据计算服务,它以Serverless架构提供快速、全托管的在线数据仓库服务,消除传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您经济并高效的分析处理海量数据。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等