阿里云文档 2025-03-03

新版Data Studio任务发布

本文为您介绍如何通过发布流程将任务的新增、更新、删除操作发布至生产环境。

阿里云文档 2025-02-28

创建PyODPS 2节点任务

DataWorks提供了PyODPS 2节点类型,允许您使用PyODPS语法在DataWorks平台上开发PyODPS任务。PyODPS集成了MaxCompute的Python SDK,使您能够在PyODPS 2节点上直接编写和编辑Python代码来操作MaxCompute。

阿里云文档 2025-02-14

基于自建Hadoop集群进行自定义CDH镜像

本文为您介绍如何在DataWorks绑定自建 Hadoop 集群并进行任务开发,以及如何自定义自建集群运行环境。

阿里云文档 2025-02-12

查看任务运行历史记录

DataWorks的运行历史面板展示您最近三天在数据开发界面的任务执行记录。

阿里云文档 2024-12-04

优雅下线表和任务

对于数据治理过程中的无效任务或表,数据资产治理为您提供完整的下线方案,包含下线风险评估、下线通知推送、下线过程管理等全流程功能,为您解决人工识别下线风险、任务存在正常调度的下游任务时不能下线、因无法预知风险而不敢轻易下线等问题,同时提供批量下线功能,方便统一管理和执行,为您提升下线效率。

问答 2024-08-05 来自:开发者社区

DataWorks任务运行过程中遇到源端表某字段数据过长在不增大脏数据限制条数的前提下,怎么解决呢?

DataWorks任务运行过程中遇到源端表某字段数据过长(同步到dataworks为string类型,大小超过8M),导致同步任务报错,在不增大脏数据限制条数的前提下,怎么解决呢?

文章 2024-07-17 来自:开发者社区

DataWorks产品使用合集之在同步任务中遇到脏数据时,是否会将脏数据插入到数据表中

问题一:DataWorks 集合里面的数据迁移到其他的mongodb datax1.0不支持顺序吗? DataWorks mongodb集合里面的数据迁移到其他的mongodb datax1.0不支持顺序吗? 参考回答: DataWorks中的MongoDB数据迁移到另一个MongoDB时,使用DataX 1.0不支持保证数据的迁移顺序。 在M...

DataWorks产品使用合集之在同步任务中遇到脏数据时,是否会将脏数据插入到数据表中
问答 2024-07-09 来自:开发者社区

DataWorks中odps同步任务到mysql的时候报脏数据,这个有办法解决吗?

DataWorks中odps同步任务到mysql的时候报脏数据,这个有办法解决吗?

问答 2024-07-09 来自:开发者社区

DataWorks任务是执行成功的,怎么看日志有没有脏数据呢?

DataWorks任务是执行成功的,怎么看日志有没有脏数据呢?源端是TSDB,查询的metric是存在的,目标端有配置表和分区,也是任务中使用的表和分区,日志中有如下打印,这种是脏数据?

文章 2024-06-10 来自:开发者社区

DataWorks操作报错合集之离线同步任务中,把表数据同步到POLARDB,显示所有数据都是脏数据,报错信息:ERROR JobContainer - 运行scheduler 模式[local]出错.是什么原因

问题一:dataworks重试也失败,什么原因? dataworks重试也失败? 任务oneclickOdps_polardb_to_odps_first_day_extra_level_mergeInto执行失败?日志:2023-12-19 00:11:39.832 [main] [ERROR] com.aliyun.odps.dma.merger_new.utils.Job...

DataWorks操作报错合集之离线同步任务中,把表数据同步到POLARDB,显示所有数据都是脏数据,报错信息:ERROR JobContainer - 运行scheduler 模式[local]出错.是什么原因

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks任务相关内容

大数据开发治理平台 DataWorks更多任务相关

产品推荐

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

+关注