文章 2022-02-17 来自:开发者社区

数据湖 VS 数据仓库之争?阿里提出大数据架构新概念:湖仓一体

作者 |关涛、李睿博、孙莉莉、张良模、贾扬清(from 阿里云智能计算平台) 黄波、金玉梅、于茜、刘子正(from 新浪微博机器学习研发部) 编者按 随着近几年数据湖概念的兴起,业界对于数据仓库和数据湖的对比甚至争论就一直不断。有人说数据湖是下一代大数据平台,各大云厂商也在纷纷的提出自己的数据湖解决方案,一些云数仓产品也增加了和数据湖联动的特性。但是数据仓库和数据湖的区别到底是什么,是技术路线之....

数据湖 VS 数据仓库之争?阿里提出大数据架构新概念:湖仓一体
文章 2022-02-17 来自:开发者社区

业内首次融合数据仓库与数据湖 阿里云推出下一代大数据平台 “湖仓一体”

9月18日,2020云栖大会上,阿里云正式推出大数据平台的下一代架构——“湖仓一体”,打通数据仓库和数据湖两套体系,让数据和计算在湖与仓之间自由流动,从而构建一个完整的有机的大数据技术生态体系。为企业提供兼具数据湖的灵活性和数据仓库的成长性的新一代大数据平台,降低企业构建大数据平台的整体成本。大数据技术从本世纪初发展至今演进出了数据仓库和数据湖两种趋势,前者通常指云厂商提供的基于大数据技术的一体....

业内首次融合数据仓库与数据湖  阿里云推出下一代大数据平台 “湖仓一体”
文章 2022-02-17 来自:开发者社区

云原生数据湖解决方案打破数据孤岛,大数据驱动互娱行业发展

行业综述 全民娱乐时代,网络互娱市场持续保持高速增长随着互联网的普及以及技术的发展,互联网娱乐行业的发展也日渐成熟。从早期单一门户网站,到个人博客的流行,再到视频网站的壮大。以及这两年层出不穷的短视频、直播、资讯平台等,网络娱乐行业的发展也正在从内容为王,开始往大数据驱动内容创新与推广的方向进行发展。随着生活条件的变好,人们进入了娱乐即生活,生活即娱乐的时代。如同互联网时代到来引爆信息爆炸一样,....

云原生数据湖解决方案打破数据孤岛,大数据驱动互娱行业发展
文章 2022-02-17 来自:开发者社区

JindoFS: 云上大数据的高性能数据湖存储方案

本场视频链接:云上大数据的一种高性能数据湖存储方案 ppt观看:https://www.slidestalk.com/AliSpark/0761944 EMR JindoFS背景 计算存储分离已经成为云计算的一种发展趋势。在计算存储分离之前,普遍采用的是传统的计算存储相互融合的架构(下图左侧),但是这种架构存在一定的问题,比如在集群扩容的时候会面临计算能力和存储能力相互不匹配的问题。用户在某些.....

JindoFS: 云上大数据的高性能数据湖存储方案
文章 2022-02-17 来自:开发者社区

JindoFS解析 - 云上大数据高性能数据湖存储方案

作者:殳鑫鑫,花名辰石,阿里巴巴计算平台事业部EMR团队技术专家,目前从事大数据存储以及Spark相关方面的工作。 2019 年云栖大会上,EMR Jindo 的技术存储分离方案得到很大的关注,视频直达链接【云上大数据的一种高性能数据湖存储方案】 【EMR打造高效云原生数据分析引擎】 JindoFS背景 计算存储分离是云计算的一种发展趋势,传统的计算存储相互融合的的架构存在一...

文章 2022-02-16 来自:开发者社区

认识数据湖——拥抱开源大数据技术的前提

世界对数据湖的兴趣依然在不断增长,但如果说对数据湖的宣传都是烟雾弹的话,这就贬低了数据湖真正的能力。“数据仓库”和“大数据”等概念都逐渐深入人心,但“数据湖”仍然是让IT和业务相关者头疼的一件事情。 随着人们对于数据湖的清晰定义、使用案例、最佳实践等信息的需求不断增长,IT专业人士需要一则明确的数据湖指南,回答以下问题:数据湖是什么?我们应该如何利用它?数据湖又将如何改变大数据呢? 1.定义及.....

文章 2022-02-16 来自:开发者社区

数据湖:大数据游泳的安全方式?

自从Pentaho公司首席技术官詹姆斯•狄克逊创造了“数据湖”这个词,至今已有五年多的时间。他当时提出这个建议,“如果你认为数据集市是一个经过清洗,方便消费的瓶装水商店的‘数据湖’,那么数据湖则是一个更自然状态的水体。”这个比喻很简单。但根据专家的经验,许多最终用户对这个的概念还有很多困惑。在这篇文章中,专家想澄清数据池是什么,组织是否会考虑使用数据湖,以及他们使用数据湖所面临的挑战,并概述了一....

问答 2022-02-15 来自:开发者社区

为什么说数据湖是大数据和 AI 时代融合存储和计算的全新体系?

为什么说数据湖是大数据和 AI 时代融合存储和计算的全新体系?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等