从零开始部署hadoop_3.1.1集群.docx_hadoop安装配置步骤资源-CSDN文库

需积分: 9 157 浏览量 2021-06-19 13:21:17 上传评论收藏 728KB DOCX 举报

资源推荐

资源详情

资源评论

从零开始部署 hadoop_3.1.1 集群

0、搭建前期规划

本次实验目标，搭建一个小型的 hadoop 集群，其完整拓扑图如下：

针对不同规模的  集群，如何分配各主机在集群中充当的角色，请参考下面文档

如何给  集群分配角色 

1、安装并配置 hadoop 集群虚拟机母版

1.1. 创建一台虚拟机，并安装 Centos 7 系统

使用  !" 软件创建一台配置为 #" 的虚拟机，并以最小化的方式安装 #" 系统，假定

系统的主机名设置为 $。（建议虚拟机硬件参数：#%& 单核，内存 '，硬盘 ('，网络 )*+ 模式）

若不知道如何操作，请参考 ,,-.

1.2. 配置主机名

查看当前虚拟机主机名：/

若当前虚拟机主机名不是 $，则修改之：0"/

将 0 打开的 / 的内容修改为 $（注：需要先按键盘上的  按键才能够进入插入状态），

然后按  退出 0 的插入状态，再输入!1 保存并关闭 / 文件

1.3. 配置网络地址

查看虚拟机是否可以上网："2#""!!!/

修改网络配置：

进入,3!4$目录：",3!4$

查看当前目录下的文件列表：

1.5. 添加用户并授权

按照《#67" 中添加一个新用户并授权8》文档中所介绍的方法，新增一个  用户，设置

好密码（假定设置为 ），并为其授权。此用户将用于后边安装  集群使用，当然也可以不创建此用

户而直接使用  用户。

1.6. 关闭防火墙

查看防火墙状态：,/""3!0

执行关闭命令：,/""3!0

执行开机禁用防火墙自启命令：,/""3!0

1.7. 关闭 SELinux

查看 79:8 状态：;0$0"<=>"5

95

永久关闭 79:8

打开 79:8 的配置文件：0"83

将 79:?)&@A5 改为 79:?)&@A

设置后需要重启才能生效

1.8. 安装文件准备

对 $ 配置  与主机名映射关系（相当于配置路由表，注：配置信息中的 $. 和 $

这两台虚拟机将在配置好 $ 之后通过拷贝的方式创建）。

打开  配置文件："0"，（删除之前可能已存在的 .(("""$8）

.."$

..."$.

.."$

1.9. 安装文件准备

用 @B 拷贝 C4$$8$8- 、$- 文件到拟机的  用户目录（ /

）

1.10. 安装 jdk、hadoop，设置环境变量

1.10.1. 安装 jdk

安装 C0，"$805"C4$$8$8-"解压，然后 /0"C4(D"C0（将目录重命名为 C0 以

便后期进行环境变量配置），然后再 ""$"C0"（这个是复制文件或文件夹）或者使用 

/0"C0" 命令移动亦可

1.10.2. 安装 hadoop

安装 ，同上做法（即："$805"$-"解压，然后 /0"$"（将目录

重命名为  以便后期进行环境变量配置），然后再 ""$"（这个是复制文件或文

件夹）或者使用 "/0"" 命令移动亦可

1.10.3. 设置环境变量

在 Windows 系统下什么是环境变量？简单说，就是指定一个目录，运行软件的时候，相关的程序将会

按照该目录寻找相关文件。设置变量对于一般人最实用的功能就是：不用拷贝某些  文件到系统目录中了，

剩余15页未读，继续阅读

内容反馈

Annixlichengzhi

粉丝: 0
资源: 4

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈

feedback-tip