阿里云文档 2025-06-06

如何通过数据集成操作扩展点触发扩展程序校验的过程

在DataWorks开放平台中,成功注册、上线并启用扩展程序后,在该扩展程序所生效的工作空间中,使用页面部分功能(即触发扩展点事件)时,DataWorks会将事件消息发送至您的扩展程序,您可以查看扩展程序返回的结果。本文将为您介绍数据集成支持的扩展点事件,以及使用扩展点触发扩展程序校验的操作过程。

阿里云文档 2025-05-28

数据集成Serverless同步任务

本文介绍数据集成Serverless同步任务的特性以及相关配置。

阿里云文档 2025-02-28

数据集成侧创建数据源注意事项

DataWorks支持众多数据源作为数据集成的输入与输出数据源,可通过数据集成模块的数据源为数据集成任务创建数据源,本文为您介绍数据集成侧数据源创建方式。

阿里云文档 2024-12-10

使用阿里云CLI管理云原生大数据计算服务 MaxCompute

本文以调用云原生大数据计算服务 MaxComputeListProjects接口获取MaxCompute项目列表为例,为您介绍使用阿里云CLI调用MaxCompute OpenAPI的操作步骤。

阿里云文档 2024-11-28

使用阿里云CLI调用DataWorks OpenAPI

本文以调用大数据开发治理平台 DataWorksListProjects接口查询DataWorks工作空间列表为例,为您介绍使用阿里云CLI调用DataWorks OpenAPI的操作步骤。

文章 2024-11-05 来自:开发者社区

ClickHouse与大数据生态集成:Spark & Flink 实战

在当今这个数据爆炸的时代,能够高效地处理和分析海量数据成为了企业和组织提升竞争力的关键。作为一款高性能的列式数据库系统,ClickHouse 在大数据分析领域展现出了卓越的能力。然而,为了充分利用ClickHouse的优势,将其与现有的大数据处理框架(如Apache Spark和Apache Flink)进行集成...

ClickHouse与大数据生态集成:Spark & Flink 实战
文章 2024-11-04 来自:开发者社区

AnalyticDB与大数据生态集成:Spark & Flink

在大数据时代,实时数据处理和分析变得越来越重要。AnalyticDB(ADB)是阿里云推出的一款完全托管的实时数据仓库服务,支持PB级数据的实时分析。为了充分发挥AnalyticDB的潜力,将其与大数据处理工具如Apache Spark和Apache Flink集成是非常必要的。本文将从我个人的角度出发,分享如何...

AnalyticDB与大数据生态集成:Spark & Flink
文章 2024-08-28 来自:开发者社区

RabbitMQ与大数据平台的集成

在现代的大数据处理架构中,消息队列作为数据传输的关键组件扮演着重要的角色。RabbitMQ 是一个开源的消息代理软件,它支持多种消息协议,能够为分布式系统提供可靠的消息传递服务。本篇文章将探讨如何使用 RabbitMQ 与 Hadoop 和 Spark 进行集成,以实现高效的数据处理和分析。 1. 引言 随着数据量的不断增长,...

文章 2024-08-26 来自:开发者社区

【大数据管理新纪元】EMR Delta Lake 与 DLF 深度集成:解锁企业级数据湖的无限潜能!

随着大数据技术的发展,Apache Spark 成为了处理大规模数据集的首选工具。EMR (Elastic MapReduce) 是亚马逊提供的一项云服务,它简化了设置和运行 Spark 集群的过程。Delta Lake 和 DLF (Data Lake Framework) 是两个重要的开源项目,它们共同提升了数据湖的可靠性和性能。本文将通过具体的案例...

问答 2024-08-16 来自:开发者社区

在大数据计算MaxCompute中,TASKS_HISTORY 能查到数据集成的任务使用情况嘛?

在大数据计算MaxCompute中,TASKS_HISTORY 能查到数据集成的任务使用情况嘛?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

{"cardStyle":"productCardStyle","productCode":"aliyun","productCardInfo":{"productTitle":"容器化应用的持续集成与部署","productDescription":"在现代软件开发中,高效的持续集成和部署(CI/CD)是确保快速迭代和稳定交付的关键所在。基于阿里云容器服务 Kubernetes 版 ACK 与Jenkins构建持续集成与部署的解决方案,能够为企业提供从代码构建到应用部署的全流程自动化支持,显著提升开发效率和交付质量。","productContentLink":"https://www.aliyun.com/solution/tech-solution/ack-cicd","isDisplayProductIcon":true,"productButton1":{"productButtonText":"方案详情","productButtonLink":"https://www.aliyun.com/solution/tech-solution/ack-cicd"},"productButton2":{"productButtonText":"方案部署","productButtonLink":"https://www.aliyun.com/solution/tech-solution-deploy/2868455.html"},"productButton3":{"productButtonText":"查看更多技术解决方案","productButtonLink":"https://www.aliyun.com/solution/tech-solution/"},"productPromotionInfoBlock":[{"productPromotionGroupingTitle":"解决方案推荐","productPromotionInfoFirstText":"容器化应用的弹性伸缩攻略","productPromotionInfoFirstLink":"https://www.aliyun.com/solution/tech-solution/ack-hpa","productPromotionInfoSecondText":"高效编排与管理容器化应用","productPromotionInfoSecondLink":"https://www.aliyun.com/solution/tech-solution/ack-services"}],"isOfficialLogo":false},"activityCardInfo":{"activityTitle":"","activityDescription":"","cardContentBackgroundMode":"LightMode","activityContentBackgroundImageLink":"","activityCardBottomInfoSelect":"activityPromotionInfoBlock"}}