文章 2025-05-30 来自:开发者社区

StarRocks x Iceberg:云原生湖仓分析技术揭秘与最佳实践

导读: 本文将深入探讨基于 StarRocks 和 Iceberg 构建的云原生湖仓分析技术,详细解析两者结合如何实现高效的查询性能优化。内容涵盖 StarRocks Lakehouse 架构、与 Iceberg 的性能协同、最佳实践应用以及未来的发展规划,为您提供全面的技术解读。 作者:杨关锁,北京镜舟科技研发工程师 一、StarRocks La...

StarRocks x Iceberg:云原生湖仓分析技术揭秘与最佳实践
文章 2024-12-20 来自:开发者社区

OLAP技术:数据分析的修仙秘籍初探

添加图片注释,不超过 140 字(可选) 修仙篇 在修仙界中,OLAP(Online Analytical Processing,联机分析处理)被视为一种高深的法术,它能够从多个维度洞察数据之秘,揭示隐藏在浩瀚数据海洋中的奥秘与趋势。 OLAP之术,源自“关系数据库之父”Edgar F. Codd在1993年的顿悟。他洞察到传统的OLTP(在线事务处理...

OLAP技术:数据分析的修仙秘籍初探
文章 2024-08-22 来自:开发者社区

揭秘Polardb与OceanBase:从OLTP到OLAP,你的业务选对数据库了吗?热点技术对比,激发你的选择好奇心!

在数据库技术领域,阿里巴巴集团推出的Polardb和OceanBase(简称OB)作为两款备受瞩目的产品,各自拥有独特的优势和应用场景。了解它们之间的区别,对于选择适合自身业务需求的数据库系统至关重要。本文将从架构、数据模型、可伸缩性与性能、使用场景等方面详细探讨Polardb和OB的区别,并提供选择建议。 架构...

文章 2024-08-20 来自:开发者社区

实时数仓Hologres容器技术问题之应用底层技术如何解决

问题一:容器技术(如Docker)的底层技术是什么,为什么之前没有被广泛应用? 容器技术(如Docker)的底层技术是什么,为什么之前没有被广泛应用? 参考回答: 容器技术的底层技术主要是namespace和cgroup,这些技术在十几年前就已存在。然而,它们之前主要被云厂商用于内部资源隔离和管理,无法对外分发。Docker的伟大之处在于提供了一个可对...

实时数仓Hologres容器技术问题之应用底层技术如何解决
问答 2024-08-19 来自:开发者社区

为什么业务通常需要维护两套数仓架构,甚至需要不同的技术团队?

为什么业务通常需要维护两套数仓架构,甚至需要不同的技术团队?

问答 2024-07-22 来自:开发者社区

为什么要在实时数仓建设中引入数据湖技术?

为什么要在实时数仓建设中引入数据湖技术?

文章 2024-06-27 来自:开发者社区

OceanBase 轻量级数仓关键技术解读

方案概要 通过 Flink CDC 组件作为流处理引擎,以 OceanBase 的 PL/SQL + Job Package 实现批处理任务,完成数据集成以及数据建模的流批一体处理。 同时通过向量引擎+多副本架构,实现数据与业务的协同以及时效性的保障。 ...

OceanBase 轻量级数仓关键技术解读
文章 2024-06-27 来自:开发者社区

技术心得记录:数仓建模方法之范式建模、ER实体建模、维度建模

范式建模(经典数仓----关系型数据库)  不多赘述,直接三范式:  第一范式:  保证每列的原子性。即数据库表中的所有字段值都是不可分解的原子值。  第二范式:  保证一张表只描述一件事情。即除主键外其他字段完全依赖于主键。  第三范式:  不可传递依赖。即表中的字段和主键直接对应不依靠其他中间字...

文章 2024-06-11 来自:开发者社区

深入理解数仓开发(一)数据技术篇之日志采集

前言        今天开始重新回顾电商数仓项目,结合《阿里巴巴大数据之路》和尚硅谷的《剑指大数据——企业级电商数据仓库项目实战 精华版》来进行第二次深入理解学习。之前第一次学习数仓,虽然尽量放慢速度力求深入理解,但是不可能一遍掌握,尤其是关于数仓建模,那需要实打实的经验!        好在最近...

文章 2024-06-11 来自:开发者社区

深入理解数仓开发(二)数据技术篇之数据同步

1、数据同步        数据同步我们之前在数仓当中使用了多种工具,比如使用 Flume 将日志文件从服务器采集到 Kafka,再通过 Flume 将 Kafka 中的数据采集到 HDFS。使用 MaxWell 实时监听 MySQL 的 binlog 日志,并将采集到的变更日志(json 格式)保存到 Kafka,同样再由一个 Flume 同步...

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

云原生数据仓库AnalyticDB MySQL版您可能感兴趣

产品推荐

云原生数据仓库AnalyticDB

定期发送云原生数据仓库AnalyticDB产品重大发布和技术干货

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等

登录插画

登录以查看您的控制台资源

管理云资源
状态一览
快捷访问