阿里云文档 2025-03-24

通过脚本模式配置各数据源间的离线同步任务

当您需要实现更精细化的配置管理时,您可以使用脚本模式配置离线同步任务,通过编写数据同步的JSON脚本并结合DataWorks调度参数使用,将源端单表或分库分表的全量或增量数据周期性同步至目标数据表。本文为您介绍脚本模式配置离线同步任务的常见配置,各数据源配置存在一定差异,请以具体数据源配置文档为准。

阿里云文档 2025-03-21

向导模式和脚本模式配置同步任务

PolarDB数据源为您提供读取和写入PolarDB双向通道的功能,您可以通过向导模式和脚本模式配置同步任务。

阿里云文档 2024-11-14

Shell类型节点运行Python脚本

DataWorks的Shell类型节点支持运行Python脚本。本文将为您介绍如何使用通用Shell节点或EMR Shell节点运行Python 2或Python 3脚本。

阿里云文档 2024-09-06

如何通过DataWorks节点运行ECS机器上的脚本

本实践通过在节点中使用Python第三方模块Paramiko,实现远程连接ECS并调用ECS上指定路径的Shell脚本执行,同时,提供两类节点登录ECS的代码示例。

问答 2024-07-15 来自:开发者社区

DataWorks为什么到时间了脚本运行成功了但是没有日志产生?

DataWorks20分钟跑一次的脚本设置发布后即时生成,应该会立马产生数据的对吧,为什么到时间了脚本运行成功了但是没有日志产生?

问答 2024-06-02 来自:开发者社区

DataWorks在离线数据同步任务中通过脚本模式配置了并发数,在执行日志中看为什么没有生效?

DataWorks在离线数据同步任务中通过脚本模式配置了并发数,在执行日志中看为什么没有生效?

阿里云文档 2024-01-18

通过脚本模式生成API的高级SQL示例_大数据开发治理平台 DataWorks(DataWorks)

数据服务支持通过脚本模式来生成API,脚本模式可使用基础SQL或高级SQL语法编写查询逻辑。其中,高级SQL涵盖了Mybatis语法的常见标签类型(例如,if、choose、when、otherwise、trim、foreach、where),您可以借助标签语法来灵活实现空值校验、多值遍历、动态查表、动态排序及聚合等复杂查询逻辑。

问答 2023-12-17 来自:开发者社区

DataWorks写的py脚本, 这些info日志怎么关掉? 只显示我打印的内容?

DataWorks写的py脚本, 这些info日志怎么关掉? 只显示我打印的内容?

问答 2023-07-12 来自:开发者社区

Dataworks这是不生效的脚本日志?

Dataworks这是不生效的脚本日志?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理平台 DataWorks脚本相关内容

大数据开发治理平台 DataWorks更多脚本相关

产品推荐

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

+关注