Hadoop 安装与配置实验报告
本实验报告的主要目的是演示如何在 Ubuntu 环境中安装和配置 Hadoop。Hadoop 是一个开源的分布式计算框架，广泛应用于大数据处理和分析领域。
一、实验名称：Hadoop 安装与配置
二、实验日期：2015 年 9 月 25 日
三、实验目的：安装和配置 Hadoop，以便在大数据处理和分析中应用。
四、实验用的仪器和材料：
* 硬件环境：存 ddr3 4G 及以上的 x86 架构主机一部
* 系统环境：Ubuntu
* 软件环境：VMware 或 VirtualBox
五、实验的步骤和方法：
### 1. 关闭防火墙
在 Ubuntu 中，需要关闭防火墙，以便后续的实验步骤。使用以下命令关闭防火墙：
```
sudo ufw disable
iptables -F
```
### 2. JDK 安装
JDK 是 Hadoop 的依赖项之一，需要先安装 JDK。以下是安装 JDK 的步骤：
1. 普通用户下添加 grid 用户
2. 准备 JDK 压缩包，并将其解压到指定目录
3. 将 JDK 压缩包解压改名为 jdk，将其移动到 /usr 目录下
4. 设置 JDK 环境变量，编辑 /etc/profile 文件，添加以下内容：
```
export JAVA_HOME=/usr/jdk
export JRE_HOME=/usr/jdk/jre
export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib:$CLASSPATH
export PATH=$JAVA_HOME/bin:$JRE_HOME/bin:$PATH
```
然后保存文件。
5. 检验 JDK 是否安装成功，使用以下命令：
```
java -version
```
### 3. SSH 免密码
为了在后续的实验中方便地使用 SSH 连接，需要生成密钥。以下是生成密钥的步骤：
1. 退出 root 用户，使用以下命令：
```
su grid
```
2. 生成密钥：
```
ssh-keygen –t rsa
```
### 4. Hadoop 安装和配置
以下是安装和配置 Hadoop 的步骤：
1. 下载 Hadoop 安装包，并解压到指定目录
2. 进入 conf 目录，修改 hadoop-env.sh 文件，设置 JAVA_HOME 为 JDK 安装目录
3. 修改 core-site.xml 文件，设置 Namenode 节点
4. 修改 hdfs-site.xml 文件
5. 修改 mapred-site.xml 文件
6. 创建 tmp 目录
7. 格式化分布式文件系统
8. 启动守护进程
9. 检测守护进程启动情况
六、数据记录和计算：
本实验中，我们记录了 Hadoop 的安装和配置过程，并对其进行了检测和计算。
七、实验结果或结论：
通过本实验，我们成功地安装和配置了 Hadoop，验证了其在大数据处理和分析中的应用价值。
八、备注或说明：
本实验的成功是由于我们对 Hadoop 的安装和配置步骤的熟悉和掌握。如果出现问题，可以根据错误信息进行调试和解决。
九、引用参考文献：
1. 陆嘉恒. Hadoop 实战. 机械工业出版社.
