问答 2023-09-20 来自:开发者社区

实时数仓构建过程中,用flink sql将数据实时采集到ods(doris unique模型)后,又

实时数仓构建过程中,用flink sql将数据实时采集到ods(doris unique模型)后,又怎么将ods数据加工后放到dwd(doris unique模型)层宽表中呢?ods层数据涉及到的更新/删除也要体现在dwd和dws(doris 聚合模型)层中,请问是不是要借助外部的任务调度工具(如海豚调度)完成层与层的数据构建呢?

文章 2023-09-18 来自:开发者社区

幸福里基于 Flink & Paimon 的流式数仓实践

摘要:本文整理自字节跳动基础架构工程师李国君,在 Streaming Lakehouse Meetup 的分享。幸福里业务是一种典型的交易、事务类型的业务场景,这种业务场景在实时数仓建模中遇到了诸多挑战。本次分享主要介绍幸福里业务基于 Flink & Paimon 构建流式数仓的实践经验,从业务背景、流批一体数仓架构、实践中遇到的问题和解决方案,借助 Paimon 最终能拿到的收益,以及....

幸福里基于 Flink & Paimon 的流式数仓实践
问答 2023-09-12 来自:开发者社区

Flink CDC国产数据库tidb在数仓中的应用情况怎么样?

Flink CDC国产数据库tidb在数仓中的应用情况怎么样?

问答 2023-08-08 来自:开发者社区

您好,请教下云原生数据仓库AnalyticDB PostgreSQL版,flink用adb pg作?

您好,请教下云原生数据仓库AnalyticDB PostgreSQL版,flink用adb pg作为结果表,报错,显示超时,要开启回收机制吗?

文章 2023-08-08 来自:开发者社区

5 小时玩转阿里云 Flink 实时湖仓,速速报名!

阿里云 Flink 专家与传智教育高级顾问联合出品,5 小时玩转阿里云 Flink 实时湖仓,项目依托于传智教育博学谷线上教育平台数字化建设场景,真实还原实时计算业务细节,学完后掌握基于阿里云的 Flink CDC,Paimon,StarRocks 等核心技术,收获完整实时数仓与流式数据湖构建经验。...

5 小时玩转阿里云 Flink 实时湖仓,速速报名!
问答 2023-07-12 来自:开发者社区

Flink有没有数仓相关的demo实践?

Flink有没有数仓相关的demo实践?

问答 2023-07-01 来自:开发者社区

谁能指点一下 Flink CDC数据湖与传统数仓的区别与联系呢?

问题1:谁能指点一下 Flink CDC数据湖与传统数仓的区别与联系呢? 问题2:您说的部分功能 指的是存储吗?

问答 2023-06-04 来自:开发者社区

请教一下,Flink CDC中oracle 实时同步到数仓还有啥好办法吗?

请教一下,Flink CDC中oracle 实时同步到数仓还有啥好办法吗?

文章 2023-05-25 来自:开发者社区

《Apache Flink 案例集(2022版)》——2.数据分析——BIGO-BIGO使用Flink做OLAP分析及实时数仓的实践和优化(上)

作者:邹云鹤用户背景 BIGO 是一家面向海外的以短视频直播业务为主的公司, 目前公司的主要业务包括 BigoLive (全球直播服务),Likee (短视频创作分享平台),IMO (免费通信工具) 三部分,在全球范围内拥有 4 亿用户。 业务需求 伴随着BIGO业务的发展,对数据平台处理能力的要求越来越高,平台所面临的问题也日益凸显。BIGO 大数据平台的数据流转图如下所示: 用户在 APP,....

《Apache Flink 案例集(2022版)》——2.数据分析——BIGO-BIGO使用Flink做OLAP分析及实时数仓的实践和优化(上)
文章 2023-05-25 来自:开发者社区

《Apache Flink 案例集(2022版)》——2.数据分析——BIGO-BIGO使用Flink做OLAP分析及实时数仓的实践和优化(下)

《Apache Flink 案例集(2022版)》——2.数据分析——BIGO-BIGO使用Flink做OLAP分析及实时数仓的实践和优化(上) https://developer.aliyun.com/article/1228256实时数仓建设和优化  为了提升 BIGO 大数据平台上某些业务指标的产出效率,以及更好的管理 Flink 实时任务,BIGO 大数据平台建设了实时计算平台....

《Apache Flink 案例集(2022版)》——2.数据分析——BIGO-BIGO使用Flink做OLAP分析及实时数仓的实践和优化(下)

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

数据仓库

阿里云自主研发的云原生数据仓库,具有高并发读写、低峰谷读写、弹性扩展、安全可靠等特性,可支持PB级别数据存储,可广泛应用于BI、机器学习、实时分析、数据挖掘等场景。包含AnalyticDB MySQL版、AnalyticDB PostgreSQL 版。

+关注