阿里云文档 2024-04-18

配置Hadoop集群的弹性伸缩

当您的业务量需求不断波动时,建议您开启弹性伸缩功能并配置相应的伸缩规则,以便于E-MapReduce(简称EMR)可以按业务量波动增加或减少Task节点。确保作业完成的同时,可以节省成本。本文为您介绍如何在EMR控制台配置弹性伸缩。

文章 2024-04-09 来自:开发者社区

Hadoop【环境搭建 02】【hadoop-3.1.3 单机版YARN】(配置、启动及验证)

1. 修改配置 进入 ${HADOOP_HOME}/etc/hadoop/ 目录下,修改以下配置: mapred-site.xml[root@tcloud ~]# vim /usr/local/hadoop-3.1.3/etc/hadoop/mapred-site.xml <configuration> <property> <name>mapre...

Hadoop【环境搭建 02】【hadoop-3.1.3 单机版YARN】(配置、启动及验证)
文章 2023-12-23 来自:开发者社区

Hadoop【部署 02】hadoop-3.1.3 单机版YARN(配置、启动停止shell脚本修改及服务验证)

1. 修改配置进入 ${HADOOP_HOME}/etc/hadoop/ 目录下,修改以下配置:mapred-site.xml[root@tcloud ~]# vim /usr/local/hadoop-3.1.3/etc/hadoop/mapred-site.xml<configuration> <property> <name>mapreduce....

Hadoop【部署 02】hadoop-3.1.3 单机版YARN(配置、启动停止shell脚本修改及服务验证)
文章 2023-12-23 来自:开发者社区

Hadoop【部署 01】腾讯云Linux环境CentOS Linux release 7.5.1804单机版hadoop-3.1.3详细安装步骤(安装+配置+初始化+启动脚本+验证)

我使用的安装文件是 hadoop-3.1.3.tar.gz ,以下内容均以此版本进行说明。1.前置条件Hadoop 的运行依赖 jdk 我安装的 openjdk11【这里有个很深的坑,随后会说明】。[root@tcloud ~]# java -version openjdk version "11" 2018-09-25 OpenJDK Runtime Environment 18.9 (bui....

Hadoop【部署 01】腾讯云Linux环境CentOS Linux release 7.5.1804单机版hadoop-3.1.3详细安装步骤(安装+配置+初始化+启动脚本+验证)
阿里云文档 2023-09-13

如何配置数据湖构建作为EMR上Hadoop集群的元数据_EMR on ECS_开源大数据平台 E-MapReduce(EMR)

本文为您简单介绍阿里云数据湖构建,以及如何切换E-MapReduce(简称EMR)的元数据存储类型。

阿里云文档 2023-09-03

如何配置HadoopMapReduce类型作业_EMR on ECS_开源大数据平台 E-MapReduce(EMR)

本文介绍如何配置Hadoop MapReduce类型的作业。

问答 2022-02-15 来自:开发者社区

Hadoop安装protobuf,配置环境变量,验证的操作方法和步骤是什么?

Hadoop安装protobuf,配置环境变量,验证的操作方法和步骤是什么?

问答 2022-02-15 来自:开发者社区

Hadoop安装jdk,maven,ant,配置环境变量,验证的操作方法和步骤是什么?

Hadoop安装jdk,maven,ant,配置环境变量,验证的操作方法和步骤是什么?

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

大数据

大数据计算实践乐园,近距离学习前沿技术

+关注
登录插画

登录以查看您的控制台资源

管理云资源
状态一览
快捷访问