云原生大数据计算服务 MaxCompute系统hdfs 的相关内容

阿里云文档 2025-07-11

支持的预设的系统权限策略列表

本文描述云原生大数据计算服务 MaxCompute支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。

阿里云文档 2025-06-27

DataWorks中EMR Serverless Spark版本的用户画像分析的加工数据阶段

本文为您介绍如何用Spark SQL创建外部用户信息表ods_user_info_d_spark以及日志信息表ods_raw_log_d_spark访问存储在私有OSS中的用户与日志数据，通过DataWorks的EMR Spark SQL节点进行加工得到目标用户画像数据，阅读本文后，您可以了解如何通过Spark SQL来计算和分析已同步的数据，完成数仓简单数据加工场景。

阿里云文档 2025-05-13

订阅Serverless Spark工作流系统事件通知

EMR Serverless Spark已接入云监控平台，您可以通过事件订阅对重要的事件设置定制化的报警通知，让您及时了解事件的发生与进展，帮助您实时掌握事件动态，便于您在业务故障时快速分析并定位问题。

阿里云文档 2025-03-03

集成第三方调度系统时需要进行的配置要点

DataWorks的开放平台为您提供OpenEvent、OpenAPI等开放能力，您可通过开放平台将第三方调度系统集成到DataWorks的调度系列中，将三方调度系统的任务嵌入DataWorks的业务流程中。本文以一个示例为您介绍集成第三方调度系统时需要进行的配置要点。

阿里云文档 2024-11-01

支持的预设的系统权限策略列表

本文描述EMR Workbench支持的所有系统权限策略及其对应的权限描述，供您授权 RAM 身份时参考。

文章 2023-12-19 来自：开发者社区

【云计算与大数据技术】分布式协同系统Chubby锁、ZooKeeper在HDFS中的使用讲解（图文解释超详细）

阿里云Kuafa RPC系统夸父(Kuafu)是飞天平台内核中负责网络通信的模块，它提供了一个 RPC 的接口 , 简化编写基于网络的分布式应用夸父的设计目标是提供高可用(7×24小时)、大吞吐量(Gigabyte)、高效率、易用(简明 API、多种协议和编程接口)的 RPC服务Hadoop IPC的应用在 Hadoop系统中,Hadoop IPC为 HDFS、MapReduce提供了高效的 ....

文章 2022-02-17 来自：开发者社区

Hadoop 大数据系统在文件存储 HDFS 版上的最佳实践

在当前的数字经济时代，数据被列为跟土地，资本等并列的新生产要素，数据的存储和处理被众多行业所深度依赖。Hadoop经过多年的发展，已经成为了事实上的开源大数据标准解决方案，被众多公司采纳和使用；而且随着技术的不断迭代更新，Hadoop生态也已经从最初狭义的HDFS，MapReduce和YARN三大服务组件，逐渐发展出了Spark，Flink等新的处理框架，成长为功能更加完善和丰富的广义Hadoo....