阿里云文档 2024-12-17

数据集成Serverless同步任务

本文介绍数据集成Serverless同步任务的特性以及相关配置。

阿里云文档 2024-12-04

如何通过DataWorks数据集成同步异构数据源间的数据

本教程以MySQL中的用户基本信息(ods_user_info_d)表及OSS中的网站访问日志数据(user_log.txt)文件,通过数据集成离线同步任务分别同步至MaxCompute的ods_user_info_d、ods_raw_log_d表为例,为您介绍如何通过DataWorks数据集成实现异构数据源间的数据同步,完成数仓数据同步操作。

问答 2024-07-23 来自:开发者社区

DataWorks同步任务的数据集成资源组换成独享的后一直卡在这了这是什么原因?

DataWorks同步任务的数据集成资源组换成独享的后一直卡在这了,资源组到目标库的网络也是通的,这是什么原因?

文章 2024-06-10 来自:开发者社区

DataWorks操作报错合集之数据源同步时,使用脚本模式采集mysql数据到odps中,使用querySql方式采集数据,在脚本中删除了Reader中的column,但是datax还是报错OriginalConfPretreatmentUtil - 您的配置有误。如何解决

问题一:DataWorks是什么原因? DataWorks是什么原因?{"commonInfo":{"regionCode":"cn-shanghai","projectId":398148,"datasourceName":"new_api","resourceGroup":"group_632594213143490","resourceGroupName":"公共资源组"...

DataWorks操作报错合集之数据源同步时,使用脚本模式采集mysql数据到odps中,使用querySql方式采集数据,在脚本中删除了Reader中的column,但是datax还是报错OriginalConfPretreatmentUtil - 您的配置有误。如何解决
文章 2024-03-25 来自:开发者社区

Dataphin常见问题之离线管道同步数据datax就报连接超时如何解决

问题一:关于dataphin的openapi有详细一点的文档吗? 关于dataphin的openapi有详细一点的文档吗? https://developer.aliyun.com/article/785240?spm=a2c6h.12873639.article-detail.77.36ee5189fDb7tj 参考回答: 以下是dataph...

Dataphin常见问题之离线管道同步数据datax就报连接超时如何解决
阿里云文档 2023-09-19

如何通过数据集成同步分库分表数据至MaxCompute

本文以MySQL分库分表实时写入MaxCompute场景为例,为您介绍如何通过数据集成同步分库分表数据至MaxCompute。

问答 2023-08-22 来自:开发者社区

DataWorks可以有同步数据的服务吗,从orcal同步到MySQL,和datax那样子?

DataWorks可以有同步数据的服务吗,从orcal同步到MySQL,和datax那样子?

问答 2023-08-20 来自:开发者社区

DataWorks使用实时数据同步任务同步数据时,独享数据集成资源组的性能指标?

DataWorks使用实时数据同步任务同步数据时,独享数据集成资源组的性能指标?

文章 2023-06-11 来自:开发者社区

大数据数据采集的数据迁移(同步/传输)的Sqoop之DataX

DataX简介 DataX是一款可扩展、高效的数据集成框架,支持多种数据源之间的数据传输。它由阿里巴巴集团开发,通过配置文件来定义数据源和执行任务,可以快速地进行各种数据格式之间的转换。基本原理 DataX通过脚本或者Web界面来配置输入和输出的数据源,并通过插件机制实现了各种数据源之间的数据迁移。以下是DataX的基本原理:Reader:负责从数据源中读取数据。Transformer:负责对数....

问答 2023-06-03 来自:开发者社区

dataworks 向 doris 同步数据报错?我用datax 同步是正常的

dataworks 向 doris 同步数据报错? 我用datax 同步是正常的

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

+关注