阿里云文档 2024-08-12

通过Hadoop Shell以命令行的方式访问OSS-HDFS服务

如果您希望通过命令行的方式在开通OSS-HDFS服务的Bucket中执行上传、下载、删除等相关操作,您可以使用Hadoop Shell的方式。

阿里云文档 2024-05-06

Apache Hadoop FileUtil.unTar命令注入漏洞

2022年8月4日,Apache Hadoop官方披露修复了一个Shell命令注入漏洞CVE-2022-25168。由于Apache Hadoop的FileUtil.unTar API在传递Shell之前未对输入的文件名进行转义,攻击者可以利用该漏洞注入任意命令,从而对集群造成破坏。

文章 2023-11-22 来自:开发者社区

从一个简单的命令阅读hadoop源码(下)

2.4.2 executeKillCommand方法代码内容及解析如下:继续点击里面的killApplication方法:可以看到最终使用的是YarnClientImpl里面的killApplication方法了。2.4.3 小结到这里,可以看到整条链路已经串好了,如下:Step1: yarn脚本 (定义了入口Java类,即ApplicationCLI)Step2: ApplicationCLI....

从一个简单的命令阅读hadoop源码(下)
文章 2023-11-22 来自:开发者社区

从一个简单的命令阅读hadoop源码(上)

01 引言最近经常使用到了hadoop里面的yarn kill命令,如下:yarn application -kill application_1653633751750_0039本文就从这个简单的命令开始分析该命令的执行流程,分析一下其源码。02 源码分析2.1 导入hadoop源码首先下载hadoop的源码并导入我们的IDEA:github地址:https://github.com/apac....

从一个简单的命令阅读hadoop源码(上)
文章 2023-03-23 来自:开发者社区

从一个简单的命令阅读hadoop源码

01 引言最近经常使用到了hadoop里面的yarn kill命令,如下:yarn application -kill application_1653633751750_0039本文就从这个简单的命令开始分析该命令的执行流程,分析一下其源码。02 源码分析2.1 导入hadoop源码首先下载hadoop的源码并导入我们的IDEA:github地址:https://github.com/apac....

从一个简单的命令阅读hadoop源码
阿里云文档 2022-12-23

如何通过HadoopShell命令访问OSS和OSS-HDFS

本文为您介绍如何通过Hadoop Shell命令访问OSS和OSS-HDFS。

阿里云文档 2021-10-09

概述Dataphin中执行hadoop fs -ls命令的方法。详细信息创建HADOOP_MR任务,可以执行hadoop fs -ls / 命令。适用于Dataphin

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

大数据

大数据计算实践乐园,近距离学习前沿技术

+关注