问答 2023-02-27 来自:开发者社区

大家做实时数仓,很多个表关联,是从数仓拿出来统计的还是拿业务库的数据统计的?

大家做实时数仓,很多个表关联,是从数仓拿出来统计的还是拿业务库的数据统计的?

文章 2022-11-28 来自:开发者社区

《基于AnalyticDB构建企业实时数仓》电子版地址

《基于AnalyticDB构建企业实时数仓》基于AnalyticDB构建企业实时数仓 电子版下载地址: https://developer.aliyun.com/ebook/3983 电子书: </div>

《基于AnalyticDB构建企业实时数仓》电子版地址
文章 2022-09-15 来自:开发者社区

阿里云云原生实时数仓升级发布,助力企业快速构建一站式实时数仓

当前,大数据正在从计算规模化向实时化演进,实时数仓的应用场景也越来越广泛。例如:央视春晚,可通过大屏实时统计全国的收视率和观众画像;多个城市正在开展的城市大脑项目, 通过 IoT 的摄像头信息,实时捕获各个城市中的交通、车辆、人流等信息进行交通监察与治理;银行、证券交易所等金融机构实时监控交易行为,进行反作弊反洗钱等行为的探测;电商大促场景下,可通过大屏实时展示成交额并实现毫秒级更新。除此之外,....

阿里云云原生实时数仓升级发布,助力企业快速构建一站式实时数仓
问答 2022-08-29 来自:开发者社区

流批一体实时数仓阶段小迈数仓如何呈现?

流批一体实时数仓阶段小迈数仓如何呈现?

文章 2022-06-13 来自:开发者社区

【实时数仓篇】(01)美团 Flink 实时数仓应用2

4.3 DW层的建设解决原始数据中数据存在噪声、不完整和数据形式不统一的情况。形成规范,统一的数据源。如果可能的化尽可能和离线保持一致。4.4 实时数仓维度数据建设变化频率低的维度可以通过离线仓库的维度数据,同步到缓存,或者通过公共服务提数据。通过维度服务查询,对用户屏蔽细节。变化频率高的维度通过维度数据的变化的消息构建拉链表通过事实数据计算衍生维度构建拉链表Tips:可以通过Hbase的MIN....

【实时数仓篇】(01)美团 Flink 实时数仓应用2
文章 2022-06-13 来自:开发者社区

【实时数仓篇】(01)美团 Flink 实时数仓应用1

文章目录一、前言二、实时数仓建设目的三、实时数仓的应用场景四、如何建设实时数仓4.1 实时数仓的整体的架构图4.2 ODS层的建设4.3 DW层的建设4.4 实时数仓维度数据建设4.5 实时数仓维度的使用4.6 实时数仓汇总层的建设五、仓库的质量保证一、前言本文是学习Flink社区在B站的实时数仓篇第一节课程的总结,1. Flink 实时数仓的应用讲师:黄伟伦(美团点评 数据系统研发工程师)。二....

【实时数仓篇】(01)美团 Flink 实时数仓应用1
问答 2022-01-13 来自:开发者社区

Flink基于动态表的实时数仓技术相对于目前其他的实时数仓技术有什么区别和优势

Flink Foward Asia 上对于Flink在实时数仓的应用的话题挺多,主要是动态表的技术,那么相对于目前其他的实时数仓技术有什么区别和优势

问答 2021-11-25 来自:开发者社区

实时数仓与传统数仓的区别是什么?

实时数仓与传统数仓的区别是什么?

文章 2021-11-24 来自:开发者社区

基于 EMR OLAP 的开源实时数仓解决方案之 ClickHouse 事务实现

作者简介阿里云 EMR-OLAP 团队;主要负责开源大数据 OLAP 引擎的研发,例如 ClickHouse,Starrocks,Trino 等。通过 EMR 产品向阿里云用户提供一站式的大数据 OLAP 解决方案。内容框架背景机制梳理技术方案测试结果未来规划一、背景Flink 和 ClickHouse 分别是实时流式计算和 OLAP 领域的翘楚,很多互联网、广告、游戏等客户都将两者联合使用于构....

基于 EMR OLAP 的开源实时数仓解决方案之 ClickHouse 事务实现
文章 2021-11-24 来自:开发者社区

基于 EMR OLAP 的开源实时数仓解决方案之 Flink + ClickHouse 事务实现

EMR-OLAP 团队主要负责开源大数据 OLAP 引擎的研发,例如 ClickHouse,Starrocks,Trino 等。通过 EMR 产品向阿里云用户提供一站式的大数据 OLAP 解决方案。本文介绍了如何支持 Flink 到 ClickHouse 的 Exactly-Once 写入来保证整个实时数仓数据准确性的现有机制及实现方案。主要内容包括:背景机制梳理技术方案测试结果未来规划一、背景....

基于 EMR OLAP 的开源实时数仓解决方案之 Flink + ClickHouse 事务实现

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

数据仓库

阿里云自主研发的云原生数据仓库,具有高并发读写、低峰谷读写、弹性扩展、安全可靠等特性,可支持PB级别数据存储,可广泛应用于BI、机器学习、实时分析、数据挖掘等场景。包含AnalyticDB MySQL版、AnalyticDB PostgreSQL 版。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等