文章 2025-03-03 来自:开发者社区

从湖仓分离到湖仓一体,四川航空基于 SelectDB 的多源数据联邦分析实践

导读:随着川航大规模数据导入需求增长,数据响应频繁出现卡顿,原 Hadoop + Apache Doris 的数据架构存在着涉及组件多、并发性不足、数据导入受限的痛点。经过综合选型对比,川航选择引入 SelectDB 建设湖仓一体大数据分析引擎,取得了数据导入效率提升 3-6 倍,查询分析性能提升 10-18 倍、实时性提升至 5 秒内等收益。 本文转录自吴乐(四川航空 信息技术部 大数据架构.....

从湖仓分离到湖仓一体,四川航空基于 SelectDB 的多源数据联邦分析实践
文章 2025-02-21 来自:开发者社区

数据无界、湖仓无界,Apache Doris 湖仓一体典型场景实战指南(下篇)

导读: 湖仓一体是将数据湖和数据仓库的优势相结合的数据管理系统。Apache Doris 结合自身特性,提出了【数据无界】和【湖仓无界】核心理念。上篇文章已介绍了 Apache Doris 湖仓一体完整方案,本文将聚焦典型应用场景,进一步深入,帮助读者更好地理解和应用 Apache Doris 湖仓一体。 在数据驱动决策的时代,湖仓一体架构以统一存储、统一计算、统一管理的创新形式,补齐了传统数.....

数据无界、湖仓无界,Apache Doris 湖仓一体典型场景实战指南(下篇)
文章 2025-02-19 来自:开发者社区

数据无界、湖仓无界, Apache Doris 湖仓一体解决方案全面解读(上篇)

在过去的数年间,数据分析技术栈经历了许多重要变革,从最初数据仓库概念的诞生,到数据湖的兴起,进而演进到湖仓一体解决方案。这一技术路线的演进,反映出现代企业在数据分析领域对性能、实时性、一致性、开放性、统一管理方面的需求不断增强。 湖仓一体的演进 01 传统数据仓库的出现 在企业信息化发展初期、业务流程数字化的不断推进下,积累的数据愈发繁杂。管理层亟需快速整理这些数据,清晰洞察业务状况以精准决策,....

数据无界、湖仓无界, Apache Doris 湖仓一体解决方案全面解读(上篇)
文章 2024-09-27 来自:开发者社区

快手:从 Clickhouse 到 Apache Doris,实现湖仓分离向湖仓一体架构升级

作者|快手大数据架构师 李振炜、曾斯维、周思闽 在当今这个数据洪流的信息时代下,数据已跃升为企业不可或缺的核心资产。深度挖掘并提炼数据内在价值,成为支撑企业战略决策的重要依据。在此背景下,快手建立了 OLAP 系统,该系统在快手应用极为广泛,每天承载近 10 亿的查询请求,为内外多个业务场景提供数据服务。具体场景包括: ToB 系统:商业化报表引擎、商业化 DMP、商业化磁力金牛、电商选品等...

快手:从 Clickhouse 到 Apache Doris,实现湖仓分离向湖仓一体架构升级
文章 2023-07-24 来自:开发者社区

AnalyticDB MySQL升级为湖仓一体架构:从湖到仓,打造云原生一站式数据分析平台

【先打一波小广告】阿里云AnalyticDB MySQL升级为湖仓一体架构,支持高吞吐离线处理和高性能在线分析,可无缝替换CDH/TDH/Databricks/Presto/Spark/Hive等。试用活动(5000ACU时+100GB存储)正在火热申请中,申请链接:https://free.aliyun.com/?searchKey=AnalyticDB%20MySQL,群号:33600023....

AnalyticDB MySQL升级为湖仓一体架构:从湖到仓,打造云原生一站式数据分析平台
文章 2022-12-21 来自:开发者社区

云原生数仓AnalyticDB如何支撑淘系十万亿级数据的实时湖仓一体分析?

简介:数据银行是阿里巴巴集团官方打造的品牌商消费者运营商业数据产品,为品牌商客户提供丰富的消费者分析能力。由于数据银行的消费者数据产品的定位需要在一份海量消费者数据之上实现不同延时要求和计算要求的分析场景,我们基于阿里云AnalyticDB MySQL最新发布的实时湖仓能力,将数据仓库和数据湖割裂的体系进行融合,高性价比的支撑了上万品牌商的分析场景,在10PB+和十万亿级数据规模下,将天级别的数....

云原生数仓AnalyticDB如何支撑淘系十万亿级数据的实时湖仓一体分析?
文章 2022-09-22 来自:开发者社区

《如何基于MaxCompute快速打通数仓和数据湖的湖仓一体实践-亦朵-529北京峰会-v1.3》电子版地址

《如何基于MaxCompute快速打通数仓和数据湖的湖仓一体实践-亦朵-529北京峰会-v1.3》【5】如何基于MaxCompute快速打通数仓和数据湖的湖仓一体实践-亦朵-529北京峰会-v1.3-to赵慧(格确定稿) 电子版下载地址:https://developer.aliyun.com/ebook/6659 电子书: ...

《如何基于MaxCompute快速打通数仓和数据湖的湖仓一体实践-亦朵-529北京峰会-v1.3》电子版地址
文章 2022-09-22 来自:开发者社区

《离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进》电子版地址

《离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进》离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进.ppt 电子版下载地址:https://developer.aliyun.com/ebook/222 电子书: </div>

《离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进》电子版地址
文章 2022-07-22 来自:开发者社区

阿里云云原生一体化数仓 — 湖仓一体新能力解读

分享人:阿里云智能 产品专家 孟硕没来得及看直播的同学,可以观看直播回放。直播回放:https://developer.aliyun.com/live/249819一、基于 MaxCompute 的湖仓一体架构更新基于MaxCompute 云数据仓库的湖仓一体架构近期进行架构升级。了解 MaxCompute 的同学可能比较清楚,MaxCompute 有两层结构,需要先创建 Project ,在 ....

阿里云云原生一体化数仓 — 湖仓一体新能力解读
问答 2022-01-19 来自:开发者社区

湖仓一体以及流批一体架构对比传统数仓架构主要有以下几点好处?

湖仓一体以及流批一体架构对比传统数仓架构主要有以下几点好处?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生数据仓库AnalyticDB MySQL版湖仓一体相关内容

产品推荐

数据仓库

阿里云自主研发的云原生数据仓库,具有高并发读写、低峰谷读写、弹性扩展、安全可靠等特性,可支持PB级别数据存储,可广泛应用于BI、机器学习、实时分析、数据挖掘等场景。包含AnalyticDB MySQL版、AnalyticDB PostgreSQL 版。

+关注