阿里云文档 2025-04-25

选择业务场景

阿里云EMR针对不同业务场景提供了数据湖集群、数据分析集群、实时数据流集群、数据服务集群四类预定义业务场景。若您的业务需集成特定组合的组件,您可创建自定义集群,灵活组合EMR提供的组件,打造适配业务特性的大数据平台。本文将为您介绍这些集群的区别,帮助您快速选型。

阿里云文档 2025-04-24

基于eRDMA部署3FS高性能分布式存储集群

3FS是深度求索(DeepSeek)公司自主研发的高性能分布式存储系统,专为AI大模型训练、大数据分析及高性能计算(HPC)场景优化设计。在3FS中,融合现代SSD存储与RDMA网络技术,突破传统网络的性能瓶颈。本文介绍如何基于阿里云自研的云上弹性RDMA网络部署3FS集群,实现低延迟与高吞吐数据传输,支撑AI训练和大规模数据分析的高性能需求。

阿里云文档 2025-04-22

通过域名访问EMR集群

为避免因集群弹性伸缩或节点故障而导致的IP地址变更对业务连续性产生影响,EMR集群支持在同一VPC或跨VPC场景下,通过集群节点域名访问EMR服务。本文档将详细介绍如何配置EMR集群的域名访问。

阿里云文档 2025-03-24

关于默认关闭ACK集群内新建ECS实例源/目的IP检查的公告

由于云服务器 ECS 新建实例、网卡默认开启源/目的IP检查会影响使用Terway和Flannel网络插件的集群容器网络连通性,自2025年04月22日0时0分起,ACK将默认关闭集群内新建ECS实例源/目的IP检查。

阿里云文档 2025-03-05

如何通过集群Gateway节点提交作业

在阿里云EMR体系中,Gateway实例可以作为一个独立的作业提交点,关联到已有的集群。本文为您介绍如何通过已有的EMR集群创建Gateway实例和节点组并提交作业。

文章 2024-10-14 来自:开发者社区

大数据-81 Spark 安装配置环境 集群环境配置 超详细 三台云服务器

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(已更完) HDFS(已更完) MapReduce(已更完) Hive(已更完) Flume(已更完) Sqoop(已更完) Zookeeper(已更完) HBase(已更完) Redis (已更完) Kafka(已更完) ...

大数据-81 Spark 安装配置环境 集群环境配置 超详细 三台云服务器
文章 2024-10-14 来自:开发者社区

大数据-78 Kafka 集群模式 集群的应用场景与Kafka集群的搭建 三台云服务器

点一下关注吧!!!非常感谢!!持续更新!!!目前已经更新到了:Hadoop(已更完)HDFS(已更完)MapReduce(已更完)Hive(已更完)Flume&...

大数据-78 Kafka 集群模式 集群的应用场景与Kafka集群的搭建 三台云服务器
文章 2024-10-12 来自:开发者社区

大数据-02-Hadoop集群 XML配置 超详细 core-site.xml hdfs-site.xml 3节点云服务器 2C4G HDFS Yarn MapRedece(一)

点一下关注吧!!!非常感谢!!持续更新!!! 目前已经更新到了: Hadoop(正在更新) 章节内容 上一节完成了: Java的环境配置 Hadoop环境配置 顺利完成了基础环境的配置,但是对于Hadoop来说,目前还有一些...

大数据-02-Hadoop集群 XML配置 超详细 core-site.xml hdfs-site.xml 3节点云服务器 2C4G HDFS Yarn MapRedece(一)
文章 2024-10-12 来自:开发者社区

大数据-02-Hadoop集群 XML配置 超详细 core-site.xml hdfs-site.xml 3节点云服务器 2C4G HDFS Yarn MapRedece(二)

接上篇:https://developer.aliyun.com/article/1621578?spm=a2c6h.13148508.setting.18.49764f0eTUci5Z MapReduce 集群 运行环境 sudo vim mapred-env....

大数据-02-Hadoop集群 XML配置 超详细 core-site.xml hdfs-site.xml 3节点云服务器 2C4G HDFS Yarn MapRedece(二)
文章 2023-02-26 来自:开发者社区

搭建大数据集群linux服务器配置步骤

1、IP设置使用下面命令修改添加示例内容命令:vi /etc/sysconfig/network-scripts/ifcfg-ensXX修改添加的内容示例:BOOTPROTO=static IPADDR=192.168.1.100 NETMASK=255.255.255.0 GATEWAY=192.168.1.1 DNS1=8.8.8.8 # 设置开机启动网卡 ONBOOT=yes重启网络服务.....

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

云服务器ECS

做技术先进、性能优异、稳如磐石的弹性计算!

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等