阿里云文档 2025-04-21

如何快速构建一个从Kafka到Hologres的数据同步作业

本文为您介绍如何通过实时计算控制台快速构建从Kafka到Hologres的数据同步作业,实现日志数据的实时入仓部署。

文章 2025-03-01 来自:开发者社区

鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目

摘要:本文整理自鹰角大数据开发工程师,Apache Hudi Contributor 朱正军老师在 Flink Forward Asia 2024 生产实践(二)专场中的分享。主要分为以下四个部分: 鹰角数据平台架构 数据湖选型 湖仓一体建设 未来展望 01鹰角数据平台架构 首先给大家介绍一...

鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
文章 2025-02-19 来自:开发者社区

鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目

摘要:本文整理自鹰角大数据开发工程师,Apache Hudi Contributor 朱正军老师在 Flink Forward Asia 2024 生产实践(二)专场中的分享。主要分为以下四个部分: 一、鹰角数据平台架构 二、数据湖选型 三、湖仓一体建设 四、未来展望 一、鹰角数据平台架构 首先给大家介绍一下鹰角目前的数据平台架构。在介绍之前,关于鹰角我先给大家做简单的介绍。 1.1 ...

鹰角基于 Flink + Paimon + Trino 构建湖仓一体化平台实践项目
阿里云文档 2025-01-21

物化表,物化表快速入门

本文将基于物化表,带您快速体验如何构建流批一体的湖仓分析处理链路,以及通过修改物化表新鲜度,完成由批到流的切换,实现数据的实时更新。

文章 2024-12-31 来自:开发者社区

实时计算UniFlow:Flink+Paimon构建流批一体实时湖仓

一、实时计算架构相关介绍 1. 背景与问题提出 今天要分享的是关于实时计算的相关架构。我们以开放模式的数据服务为核心构建湖仓,整合各类数据统计到湖仓中。在这个过程中,无论是数据流量的管控还是基础构建的选择,都处于开放状态,这样可以支持多种不同的应用场景,用于产品分析。最终,这些数据还能为AI提供进一步分析和报表展示的基础。这种湖仓架构看似完美,但在实际运营中,往往会忽略一些细节,...

阿里云文档 2024-10-29

基于TairSearch构建实时股票K线指标服务

本文介绍如何基于TairSearch构建一个实时的股票K线指标服务。

问答 2024-08-07 来自:开发者社区

为什么选择Flink和Iceberg来构建实时湖仓一体的架构?

为什么选择Flink和Iceberg来构建实时湖仓一体的架构?

文章 2024-04-12 来自:开发者社区

Flink+Paimon+Hologres 构建实时湖仓数据分析

本次分享将为大家介绍 Flink + Paimon + Hologres 构建湖仓一体数据分析。Hologres 是阿里云自研一站式实时数仓产品,通过和 Paimon 的深度合作,提供分钟级/秒级时效性+秒级 OLAP 性能,实现流式湖仓的分层建模,降低开发运维成本,打破数据孤岛,实现业务洞察。 1. 数据分析架构的实时性演进 ...

Flink+Paimon+Hologres 构建实时湖仓数据分析
文章 2024-04-11 来自:开发者社区

Flink+Paimon+Hologres 构建实时湖仓数据分析

本文整理自阿里云高级专家喻良,在 Flink Forward Asia 2023 主会场的分享。本次分享将为大家介绍 Flink + Paimon + Hologres 构建湖仓一体数据分析。Hologres 是阿里云自研一站式实时数仓产品,通过和 Paimon 的深度合作,提供分钟级/秒级时效性+秒级 OLAP 性能,实现流式湖仓的分层建模,降低开发运维成本,打破数据孤岛,实现业务洞察。1. ....

Flink+Paimon+Hologres 构建实时湖仓数据分析
文章 2024-01-22 来自:开发者社区

Paimon 实践 | 基于 Flink SQL 和 Paimon 构建流式湖仓新方案

01数据分析架构演进目前,数据分析架构正在从Hive到Lakehouse的演变。传统数仓包括Hive、Hadoop正在往湖、Lakehouse 架构上演进,Lakehouse 架构包括Presto、Spark、OSS,湖格式 (Delta、Hudi、Iceberg) 等等架构,这是现在比较大的趋势。Lakehouse 架构包含了诸多新能力。首先OSS比起传统的HDFS有了更加弹性、更加计算存储分....

Paimon 实践 | 基于 Flink SQL 和 Paimon 构建流式湖仓新方案

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

阿里云实时计算Flink

一套基于Apache Flink构建的一站式、高性能实时大数据处理平台,广泛适用于流式数据处理、离线数据处理、DataLake计算等场景。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等