开源云原生大数据计算服务 MaxCompute系统的相关内容

阿里云文档 2025-07-11

支持的预设的系统权限策略列表

本文描述云原生大数据计算服务 MaxCompute支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。

阿里云文档 2025-06-27

DataWorks中EMR Serverless Spark版本的用户画像分析的加工数据阶段

本文为您介绍如何用Spark SQL创建外部用户信息表ods_user_info_d_spark以及日志信息表ods_raw_log_d_spark访问存储在私有OSS中的用户与日志数据，通过DataWorks的EMR Spark SQL节点进行加工得到目标用户画像数据，阅读本文后，您可以了解如何通过Spark SQL来计算和分析已同步的数据，完成数仓简单数据加工场景。

阿里云文档 2025-05-13

订阅Serverless Spark工作流系统事件通知

EMR Serverless Spark已接入云监控平台，您可以通过事件订阅对重要的事件设置定制化的报警通知，让您及时了解事件的发生与进展，帮助您实时掌握事件动态，便于您在业务故障时快速分析并定位问题。

阿里云文档 2025-03-03

集成第三方调度系统时需要进行的配置要点

DataWorks的开放平台为您提供OpenEvent、OpenAPI等开放能力，您可通过开放平台将第三方调度系统集成到DataWorks的调度系列中，将三方调度系统的任务嵌入DataWorks的业务流程中。本文以一个示例为您介绍集成第三方调度系统时需要进行的配置要点。

阿里云文档 2024-11-01

支持的预设的系统权限策略列表

本文描述EMR Workbench支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。

文章 2023-07-28 来自：开发者社区

【XL-LightHouse】开源通用型流式大数据统计系统介绍

概述XL-LightHouse是针对互联网领域繁杂的流式数据统计需求而开发的一套集成了数据写入、数据运算、数据存储和数据可视化等一系列功能，支持大数据量，支持高并发的【通用型流式大数据统计平台】；XL-LightHouse目前已涵盖了常见的流式数据统计场景，包括count、sum、max、min、avg、distinct、topN/lastN等多种运算；XL-LightHouse支持多维度计算，....

文章 2019-06-06 来自：开发者社区

蚂蚁金服首席架构师何昌华：开源 SQLFlow 是牛刀初试，实时大数据系统才是未来基石

阿里妹导读：开源 SQLFlow，反哺业界，同时小小秀出AI肌肉。这就是蚂蚁金服近日开源首个将 SQL 应用于 AI 引擎项目 SQLFlow 后，业界给出的反应。带领团队研发出 SQL 正是蚂蚁金服计算存储首席架构师何昌华。今天，我们邀请到何昌华，聊聊他最近的一些想法和探索。 5月6日，蚂蚁金服副 CTO 胡喜正式宣布开源机器学习工具 SQLFlow：“未来三年，AI 能力会成为每一位技术人员....

文章 2017-07-04 来自：开发者社区

拥抱开源 DevOps引领大数据生态系统

为了开展开源战略，基于大数据生态系统组件的应用程序必须加强，才能在生产中运行。 DevOps可能是其中的重要组成部分。用户一直希望减少对供应商的依赖。但是，当他们了解当今大数据生态系统的复杂环境时，他们至少在某种程度上将承担一定的责任。新风格的数据工程要求对DevOps进行整体的调整，这就是敏捷性方法的扩展，需要开发人员对创新应用在生产中的表现承担更多的责任。同时，工程师需要以更快的速度学习....

文章 2015-10-13 来自：开发者社区

一共81个，开源大数据处理工具汇总（下），包括日志收集系统/集群管理/RPC等

作者：大数据女神-诺蓝（微信公号：dashujunvshen）。本文是36大数据专稿，转载必须标明来源36大数据。　　接上一部分：一共81个，开源大数据处理工具汇总（上），第二部分主要收集整理的内容主要有日志收集系统、消息系统、分布式服务、集群管理、RPC、基础设施、搜索引擎、Iaas和监控管理等大数据开源工具。　　日志收集系统　　一、Facebook Scribe 　　贡献者：F...