文章 2025-03-01 来自:开发者社区

Flink CDC 在阿里云 DataWorks 数据集成入湖场景的应用实践

摘要:本文整理自中阿里云 DataWorks 数据集成团队陈吉通老师在 Flink Forward Asia 2024 生产实践(二)专场中的分享。内容分为以下四个部分: 1.阿里云 DataWorks 数据集成介绍 2.DataWorks 数据集成入湖解决方案的架构和原理 3.DataWorks 数据集成入湖场景的产品化案例分享 4.未来规划 01 阿里...

Flink CDC 在阿里云 DataWorks 数据集成入湖场景的应用实践
文章 2024-04-15 来自:开发者社区

Flink CDC在阿里云DataWorks数据集成应用实践

摘要:本文整理自阿里云 DataWorks 数据集成团队的高级技术专家 王明亚(云时)老师在 Flink Forward Asia 2023 中数据集成专场的分享。内容主要为以下四部分: 阿里云 DataWorks 数据集成介绍基于 Flink CDC 数据集成新版引擎架构和原理新版引擎在 DataWorks 数据集成产品化案例分享未来规划...

Flink CDC在阿里云DataWorks数据集成应用实践
文章 2022-02-17 来自:开发者社区

阿里云 DataWorks数据集成 的开源版本DataX

DataXDataX 是阿里云 DataWorks数据集成 的开源版本,在阿里巴巴集团内被广泛使用的离线数据同步工具/平台。DataX 实现了包括 MySQL、Oracle、SqlServer、Postgre、HDFS、Hive、ADS、HBase、TableStore(OTS)、MaxCompute(ODPS)、Hologres、DRDS 等各种异构数据源之间高效的数据同步功能。DataX 商....

阿里云 DataWorks数据集成 的开源版本DataX
文章 2022-02-17 来自:开发者社区

阿里云Dataworks数据集成工具实现:OTS -> Maxcompute数据同步

Step By Step 1、配置数据源 + 测试连通性 1.1 Table Store(OTS)参数获取 1.2、AccessKey、AccessSecret获取阿里云常见参数获取位置 1.3 Dataworks数据集成配置OTS数据源 1.4 Maxcompute数据源配置 2、源数据准备及目标表创建 2.1 OTS 源数据表 2.2 odps数据表创建 CREATE TAB...

阿里云Dataworks数据集成工具实现:OTS -> Maxcompute数据同步
问答 2022-02-15 来自:开发者社区

阿里云DataWorks是如何解决数据集成问题的?

阿里云DataWorks是如何解决数据集成问题的?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

大数据开发治理DataWorks

DataWorks基于MaxCompute/Hologres/EMR/CDP等大数据引擎,为数据仓库/数据湖/湖仓一体等解决方案提供统一的全链路大数据开发治理平台。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等