没有合适的资源?快使用搜索试试~ 我知道了~
Hadoop集群部署及测试实验(二).docx
需积分: 1 0 下载量 109 浏览量
2024-03-01
13:37:44
上传
评论 1
收藏 1.4MB DOCX 举报
温馨提示
试读
15页
Hadoop集群部署及测试实验(二)
资源推荐
资源详情
资源评论
Hadoop 集群部署及测试实验(二)
一、 实验类型
hadoop 系统操作测试和 API 配置
二、 实验目的和要求
1. 学习如何在 Centos 上操作 hadoop 分布式文件存储系统
2. HDFS 的 shell 基础命令
3. HDFS 的 JAVA API
三、 实验条件
硬件:CPU:I3、内存:8G、硬盘:256G。
操作系统:CentOS 7
软件:配置好 Hadoop2.7 的集群环境,Eclipse 集成开发环境;
文件:JAVA API 的环境依赖包。
下载地址:https://pan.baidu.com/s/10UewayHTaFIQSmRqV0x_tA 提取码:09qm
四、 实验步骤
1.Hadoop 命令
1.1 命令说明
hadoop fs -ls 查看文件
hadoop fs -mkdir 创建目录
hadoop fs -du 显示目录中所有文件大小
hadoop fs -rm 删除
hadoop fs -mv 移动重命名
hadoop fs -cp 拷贝文件
hadoop fs -put 上传文件
hadoop fs -copyFromLocal 从本地系统拷贝到 dfs 中
hadoop fs -moveFromLocal 从本地系统移动到 dfs 中,与 put 后删除本地
hadoop fs -get 从 dfs 下载文件
hadoop fs -cat 输出文件内容
hadoop fs -copyTolocal 与 -get 一致
命令示例:
hadoop fs -ls
hadoop fs -mkdir -p test
hadoop fs -mkdir -p test/src
hadoop fs -rmr test4
hadoop fs -rm -r test3
hadoop fs -mv test3 test4
hadoop fs -put hadoop-2.7.1.tar /test
1.2 上传和下载
顺序执行如下几个命令
hadoop fs -ls /
echo "11111" > 1.txt
hadoop fs -put /root/1.txt /1.txt 上传文件
hadoop fs -ls /
如下图:
在浏览器上打开 http://192.168.223.134:50070/explorer.html#/,显示如下图:
在浏览器上选择 1.txt,可以下载到本地,如下图:
文件下载测试,顺序执行如下命令:
mkdir -p test
cd test
hadoop fs -get /1.txt .
ls -l
cat 1.txt
如下图:
1.3 目录操作
顺序执行如下命令:
剩余14页未读,继续阅读
资源评论
黄晴风
- 粉丝: 59
- 资源: 12
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功