Hadoop部署实验.docx

实验一 Hadoop 实验

一、实验目的

1、了解 Hadoop 的 HDFS 和 Map Reduce。

2、掌握 Hadoop 多节点部署过程。

3、掌握 HDFS Shell 命令操作

4、掌握 HDFS 的 Java 访问接口

5、掌握 MapReduce 应用程序实践

二、实验仪器设备/实验环境

 分布式文件系统为海量的数据提供了存储，MapReduce 分布式处理框架为海量

的数据提供了计算。

  部署

Hadoop 部 署 方 式 分 三 种 ， Standalone mode 单 节 点 、 Pseudo-Distributed

mode 伪多节点、Cluster mode 多节点，其中前两种都是在单机部署。

四、实验内容

、配置必要的运行环境

、" 单节点安装 

#、$% 伪多节点安装 

&、" 多节点安装 

、设置 +,+ 的环境变量，设置  的 +,+-./

+,+-./ 是  的位置

#、安装  和 0!



2、单节点安装 Hadoop

、 在  的安装目录下，创建  目录

1*

、 拷贝文件到  目录下，执行 2 进行计算测试

1!!334"

1    2  33!3%!%"%)52  6

'、 设定本机的无密码  登陆

1%*06%

1!?33-@@?33:-*0

(、 执行 2

 !叫做 >+ =，下面分别操作一下这两种 2

)、 执行  !2

A、 格式化文件系统

18B8

C、 启动名称节点和数据节点后台进程

13%8

==

D修改三台机器名为 !，!"5 和 !"，并添加域名映射、关闭防