阿里云文档 2024-08-19

基于集群的文件存储HDFS版文件系统吞吐性能测试

本文介绍集群在顺序写、顺序读、随机读等方面的性能测试方法。

文章 2024-06-21 来自:开发者社区

分布式系统详解--框架(Hadoop-HDFS的HA搭建及测试)

分布式系统详解 - 框架(Hadoop的HDFS的HA搭建及测试) 一,背景概述 解决问题1:通过上面的图我们可以明确的看出来,如果的的Namenode坏掉了,那我们的整个集群可以说就是要瘫痪了也就是单节点故障问题。...

分布式系统详解--框架(Hadoop-HDFS的HA搭建及测试)
问答 2024-06-01 来自:开发者社区

需要测试本地HDFS文件读写操作怎样才能连接E-MapReduce里面的HDFS

需要测试本地HDFS文件读写操作怎样才能连接E-MapReduce里面的HDFS

文章 2024-04-16 来自:开发者社区

Hive【基础知识 02-1】【Hive CLI 命令行工具使用】【准备阶段-建库、建表、导入数据、编写测试SQL脚本并上传HDFS】

why 【为了测试CLI和Beeline命令行工具,这里先创建一个数据库和表并导入一些数据】 1. 创建数据库 # 创建数据库 hive> CREATE DATABASE IF NOT EXISTS hive_test > COMMENT 'hive database for test' > LOCATION '/tmp/hive/test' &g...

Hive【基础知识 02-1】【Hive CLI 命令行工具使用】【准备阶段-建库、建表、导入数据、编写测试SQL脚本并上传HDFS】
文章 2024-04-14 来自:开发者社区

Hadoop【基础知识 05】【HDFS的JavaAPI】(集成及测试)

1.简介 想要使用 HDFS API,需要导入依赖 hadoop-client 。如果是 CDH 版本的 Hadoop,还需要额外指明其仓库地址: <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://...

文章 2023-12-22 来自:开发者社区

HDFS--HA部署安装:修改配置文件 测试集群工作状态的一些指令

修改配置文件/export/servers/hadoop-2.6.0-cdh5.14.0/etc/hadoop/2.2.2修改core-site.xml<configuration> <!-- 集群名称在这里指定!该值来自于hdfs-site.xml中的配置 --> <property> <name>fs.defaultFS</name>...

问答 2023-10-22 来自:开发者社区

DataWorks配置HDFS数据源需要有哪些参数配置啊,测试联通状态显示无法连通是为什么?

DataWorks配置HDFS数据源需要有哪些参数配置啊,测试联通状态显示无法连通是为什么?

文章 2023-09-13 来自:开发者社区

Hadoop配置手册2: 测试Hdfs和WordCount测试

Hadoop配置手册2Date: September 26, 2022第3章 测试Hdfs和WordCount测试任务浏览:3.1 Hdfs测试1.在HDFS文件系统上创建一个文件夹cd /usr mkdir data/ vim 1.txt1.并上传一个测试文件hadoop fs -put /usr/data/1.txt /test1.查看上传文件是否正确http://192.168.8.130....

Hadoop配置手册2: 测试Hdfs和WordCount测试
问答 2023-07-17 来自:开发者社区

DataWorks配置HDFS数据源网络连通测试失败是什么问题?

DataWorks配置HDFS数据源网络连通测试失败是什么问题?

问答 2023-03-21 来自:开发者社区

请教一下,fsql读取hdfs文件,读取多级目录怎么写?测试了不写通配符是可以的

请教一下,fsql读取hdfs文件,读取多级目录怎么写, 测试了不写通配符是可以的

本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。

产品推荐

云存储

阿里云存储基于飞天盘古2.0分布式存储系统,产品多种多样,充分满足用户数据存储和迁移上云需求。

+关注
AI助理

你好,我是AI助理

可以解答问题、推荐解决方案等