阿里云文档 2025-01-24

实时数仓Hologres数据摄入YAML 连接器

本文为您介绍如何在数据摄入YAML作业中,使用实时数仓Hologres连接器进行数据同步。

文章 2025-01-16 来自:开发者社区

用友畅捷通在Flink上构建实时数仓、挑战与最佳实践

摘要:本文整理自用友畅捷通数据架构师王龙强在 FFA2024 分论坛-生产实践专场关于用友畅捷通在 Flink 上构建实时数仓、挑战与最佳实践的分享。内容主要为以下五部分: 一、业务背景 二、数仓建设 三、当前挑战 四、最佳实践 五、未来展望 用友旗下的畅捷通信息技术股份有限公司自 2010 年成立以来,经历了从传统软件服务向 SaaS 转型的历程,并逐步构建了自己的云服务平台。在...

用友畅捷通在Flink上构建实时数仓、挑战与最佳实践
阿里云文档 2024-12-23

开发及部署基于Hologres连接器的 Flink DataStream作业

Hologres与Flink全托管高度兼容,多数情况下您可以使用Flink SQL的方式,声明Hologres的源表、维表及结果表,进而使用SQL表达数据的处理逻辑。但对于特殊业务场景,Flink SQL方式无法满足业务计算时,您需要使用DataStream的方式读写数据。本文以VVR-8.0.8-Flink-1.17版本为例,为您完整地展示如何调试和开发基于Hologres连接器的DataStr...

阿里云文档 2024-07-30

通过Flink将数据批量导入到Hologres

Hologres推出的新版Flink Connector插件,支持通过Flink将数据批量导入到Hologres,实现高效且低负载的数据导入。

文章 2024-01-11 来自:开发者社区

流式湖仓增强,Hologres + Flink 构建企业级实时数仓

2023 年 12 月,由阿里云主办的实时计算闭门会在北京举行,阿里云实时数仓 Hologres 研发负责人姜伟华现场分享 Hologres+Flink 构建的企业级实时数仓,实现全链路的数据实时计算、实时写入、实时更新、实时查询。同时,随着流式湖仓的兴起,Hologres 除了支持 Delta、Hudi 等通用湖格式...

流式湖仓增强,Hologres + Flink 构建企业级实时数仓
文章 2024-01-04 来自:开发者社区

实时湖仓增强,Hologres + Flink构建企业级实时数仓

1.Hologres+Flink,阿里云上众多客户实时数仓的首选随着大数据从规模化走向实时化,实时数据的需求覆盖互联网、交通、传媒、金融、政府等各个领域。实时计算在企业大数据平台的比重也在不断提高,部分行业已经达到了50%。Hologres+Flink通过众多的丰富企业级能力,替换开源复杂的各类技术组件,减少多种技术栈学习、多种集群运维、多处数据一致性维护等成本,让企业专注于业务,实现降本增效。....

实时湖仓增强,Hologres + Flink构建企业级实时数仓
文章 2023-03-15 来自:开发者社区

Apache Flink X Apache Doris 构建极速易用的实时数仓架构

摘要:本文整理自 SelectDB 资深大数据研发专家王磊,在 FFA 2022 实时湖仓专场的分享。本篇内容主要分为四个部分:实时数仓需求和挑战基于 Apache Doris 和 Apache Flink 构建实时数仓用户案例与最佳实践分享新版本特性点击查看直播回放和演讲 PPT一、实时数仓需求和挑战在数据流的角度上,分析一下传统的数据架构。从图中可以看到,数据分为实时数据流和离线数据流。在实....

Apache Flink X Apache Doris 构建极速易用的实时数仓架构
问答 2022-11-27 来自:开发者社区

大佬们,请教一个问题,我们使用flink cdc 构建的实时数仓。现在遇到一个问题,flink cd

大佬们,请教一个问题,我们使用flink cdc 构建的实时数仓。现在遇到一个问题,flink cdc 订阅的是业务的从库。现在随着数据量的增加,业务需要对相关表进行归档。归档后会删除已归档的数据。而删除操作目前会被flink cdc 捕捉到。社区有没有大佬们有相关的方案解决mysql归档导致影响到数仓的问题?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

实时计算 Flink

实时计算Flink版是阿里云提供的全托管Serverless Flink云服务,基于 Apache Flink 构建的企业级、高性能实时大数据处理系统。提供全托管版 Flink 集群和引擎,提高作业开发运维效率。

+关注