文章 2025-04-02 来自:开发者社区

百观科技基于阿里云 EMR 的数据湖实践分享

作者:百观科技数据工程团队 高级工程师 齐鹏 背景介绍 公司介绍 百观科技成立于 2016 年,是以数据为核心驱动力的市场研究和信息服务公司。百观以全域数据为基础,通过客观科学的数据分析,解锁数据价值,为客户提供具有现实指导意义的洞察和解决方案。 百观的数据产品和解决方案目前覆盖 10+行业、200,000+企业的上百种商业分析维度,获得了市场...

百观科技基于阿里云 EMR 的数据湖实践分享
阿里云文档 2025-03-11

阿里云StarRocks业务使用最佳实践

本文旨在为您介绍StarRocks的基础使用方法和常见操作,适用于首次接触StarRocks的用户。

文章 2025-02-28 来自:开发者社区

阿里云 EMR Serverless StarRocks3.x,极速统一的湖仓新范式

01 StarRocks背景介绍StarRocks定位 StarRocks 的定位两个比较关键的点,即极速和统一: “极速”是指其可以做到极致的性能,大大提升 OLAP 场景下查询的效率。从StarRocks 1.0版本开始打造的目标就是极致的速度,利用 CBO 及...

阿里云 EMR Serverless StarRocks3.x,极速统一的湖仓新范式
文章 2025-02-28 来自:开发者社区

基于阿里云 EMR Serverless Spark 版快速搭建OSS日志分析应用

背       景 随着互联网服务的广泛普及与技术应用的深入发展,日志数据作为记录系统活动、用户行为和业务操作的宝贵资源,其价值愈发凸显。然而,当前海量日志数据的产生速度已经远远超出了传统数据分析工具的处理能力,这不仅要求我们具备高效的数据收集和存储机制,更呼唤着强大、灵活且易用的数据分析平台的诞生。在此背景下,Apache  Spark,这一专为...

基于阿里云 EMR Serverless Spark 版快速搭建OSS日志分析应用
文章 2025-02-19 来自:开发者社区

美的楼宇科技基于阿里云 EMR Serverless Spark 构建 LakeHouse 湖仓数据平台

作者:美的楼宇科技事业部 先行研究中心智能技术部 美的楼宇科技 IoT 数据平台建设背景 美的楼宇科技事业部(以下简称楼宇科技)是美的集团旗下五大板块之一,产品覆盖多联机组、大型冷水机组、单元机、机房空调、扶梯、直梯、货梯以及楼宇自控软件和建筑弱电集成解决方案,远销海内外200多个国家。针对当前设备数据量庞大且持续增长、数据呈现半结构化特点的现状,现有系统仅停留在数据存...

美的楼宇科技基于阿里云 EMR Serverless Spark 构建 LakeHouse 湖仓数据平台
文章 2025-02-10 来自:开发者社区

阿里云 EMR Serverless Spark 在微财机器学习场景下的应用

作者:微财技术研发经理 宋鑫 微财介绍 微财是一家创新型的金融科技企业,凭借多年积累的金融科技能力和数据处理优势,为客户提供消费分期等金融信息服务,致力于成为值得信赖的金融机构合作伙伴。旗下拥有好分期等品牌,为高成长用户提供信用分期借款过程中的综合性信息、技术以及辅助服务。 业务挑战 数据资源是金融科技企业的核心价值,微财依托大数据评估用户借款...

阿里云 EMR Serverless Spark 在微财机器学习场景下的应用
文章 2025-01-16 来自:开发者社区

阿里云 EMR 发布托管弹性伸缩功能,支持自动调整集群大小,最高降本60%

开源大数据平台 E-MapReduce(简称“EMR”)是云原生开源大数据平台,为客户提供简单易集成的Hadoop、Hive、Spark、StarRocks、Flink、Presto等开源大数据计算和存储引擎。 EMR on ECS是指EMR在ECS上运行的方式。EMR on ECS将EMR的大数据处理功能与ECS的容器化部署优势相结合,使得您可以更加灵活地配置和管理EMR集群...

阿里云 EMR 发布托管弹性伸缩功能,支持自动调整集群大小,最高降本60%
文章 2024-10-28 来自:开发者社区

降本60% ,阿里云 EMR StarRocks 全新发布存算分离版本

简介: 阿里云 EMR Serverless StarRocks 现已推出全新存算分离版本,该版本不仅基于开源 StarRocks 进行了全面优化,实现了存储与计算解耦架构,还在性能、弹性伸缩以及多计算组隔离能力方面取得了显著进展。通过实现存储与计算资源的解耦,降低整体存储成本和计算成本达60%以上,同时保持了与传统存算一体架构相媲美的内表处理速度。此外,该版本支持高度灵活的弹性伸缩机制...

降本60% ,阿里云 EMR StarRocks 全新发布存算分离版本
文章 2024-10-24 来自:开发者社区

阿里云EMR StarRocks X Paimon创建 Streaming Lakehouse

讲师:焦明烨 阿里云计算平台事业部OLAP引擎开发工程师 主要内容: StarRocks数据湖能力介绍 使用阿里云EMR StarRocks构建基于Paimon的极速实时湖仓 StarRocks + Paimon的最新进展 StarRocks + Paimon未来规划     ...

阿里云EMR StarRocks X Paimon创建 Streaming Lakehouse
文章 2024-10-17 来自:开发者社区

阿里云EMR StarRocks X Paimon创建 Streaming Lakehouse

摘要:本文整理自阿里云计算平台事业部 OLAP 引擎开发工程师焦明烨老师在8月3日 Streaming Lakehouse Meetup Online(Paimon x StarRocks,共话实时湖仓架构)上的分享。主要分为以下四个内容: StarRocks数据湖能力介绍使用阿里云EMR StarRocks构建基于Paimo...

阿里云EMR StarRocks X Paimon创建 Streaming Lakehouse

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐