没有合适的资源?快使用搜索试试~ 我知道了~
基于CentOS7的Hadoop2.7.7集群部署+Hive+Zookeeper+hbase1.x+kylin2.5.0.doc
需积分: 50 9 下载量 33 浏览量
2020-03-16
14:42:51
上传
评论 1
收藏 2.4MB DOC 举报
温馨提示


试读
24页
基于CentOS7的Hadoop2.7.7集群部署+Hive1.2.2+Zookeeper3.4.14集群+hbase1.x+kylin2.5.0环境搭建,以及一个简单的kylin案例介绍
资源推荐
资源详情
资源评论



















Hadoop+Hive+Zookeeper+hb
ase+kylin
一、环境说明
总体环境规划
个 主机,个 主机, 台服务器部署结构,外加一台
hostna
me
master2
32
slave233 slave229
说明
!" "#$%
!" $% $% $%
安装
&
安装
'&(
安装 安装 安装
软件版本说明
二、配置 hosts、hostname
台主机的配置文件如下
)*+,--
..///
00
名称 版本 说明
(
1& .2
& (3&34.35356
5 4.
'&( //

的是
,--
的是
,--
的是
,--
三、配置 SSH
安装(三个主机都要安装)
,##(3
配置集群间无密钥登陆
)首先在上生成公钥(三个主机都要安装)
,3&%3
然后连续按个回车即可。再到生成密钥的目录下查看是否成功
)*(+,7-
)*+,
#'2&22(#5&82
注意:若没有生成#'2&文件,需要自己手动创建,
)然后将2(#5中的内容复制到#'2&文件中。
,2(#599#'2&
)最后将#'2&分发给另外两个节点
,(#'2&07--
,(#'2&07--
/)测试无密登陆是否成功
)*+,
:%0$00.;
)*7+,6
%#
<=

)*+,
:%0$0./0/.;
)*7+,6
%#
<=
)*+,
:%0$4004/.;
)*7+,6
%#
<=
四、配置 jdk(三台主机都要配置)
首先确认删除系统自带的>&
,(3?@%(>
(3>(&%3/3
'3>3.3
>(&%33/3
>3.3(>&3..3/5/62/
>3.3(>&33..3/5/62/
(是一种用于打包及安装工具
3?代表?#,代表
%(0用于文本搜索
名称里有(>&的要删除
,(333(>3.3(>&3..3/5/62/
,(333(>3.3(>&33..3/5/62/
安装>&
这里安装的是>&
)创建>&环境的路径
,&-#-->
)将下载好的压缩包解压到指定路径
)*8+A3'6;>&3#.3#636/%'3<-#-->-
)配置>的环境变量
A--(B
6(1!C!2D$EF-#-->->&.2.
6(<:!!GF0,1!C!2D$E-5->0,1!C!2D$E-5->
6(!GF,!G0,1!C!2D$E-5

/)使配置生效
,#--(B
4)测试是否配置成功
,>3
>H.2.H
1IG$JE"#=EI5#.2.35.J
1(IG$J/3KC$I5#4.35.L6J
五、关闭防火墙(三个节点都关闭)
,#B8333查看防火墙状态
,#(B8关闭防火墙
,#5B8禁止开机时防火墙自启
六、下载、解压 Hadoop(三台主
机都要安装)
下载(版本
创建(目录
,&-#-M-
解压(压缩包到指定目录
,3'6;(3%'3<-#-M-
目录规划
A( 临时目录 ((
--(-(
A( 的 节点保存元数据的目录 ;
--(-;-
A( 的 节点保存数据的目录 ;
--(-;-

七、安装配置 Hadoop
我们采用先在第一台机器上解压、配置 (,然后再分发到其他两台机器上的方式
来安装集群。
在三台机器中配置 ( 环境变量
--(B
打开后,在文档最下方添加如下配置:
6(!DD2D$EF-#-M-(3
6(!GF,!DD2D$E-50,!G
6(:2:K"!" 2!GF,!DD2D$E-5-=
6(!DD2<D2"F,!DD2D$E--(
修改完后,保存退出,执行如下命令,使更改生效
#--(B
配置 (1N 路径,定义集群操作用户,在 (3 文件中添加如下内容
6(1!C!2D$EF-#-M->&.2
配置 (1N 路径,定义集群操作用户,在 3文件中添加如下内容
6(1!C!2D$EF-#-M->&.2
/ 配置 36
O((9
O9;;#O-9
O#9;0--0...O-#9
O(=9指定 的默认名称O-(=9
O-((9
O((9
O9;;#O-9
O#9;0--0...O-#9
O(=9 的 P"O-(=9
O-((9
O((9
O9((O-9
O#9--(-(O-#9
O(=9节点上本地的 ( 临时文件夹O-(=9
O-((9
;;# 为 的地址,(( 为 ( 临时目录的地址。
剩余23页未读,继续阅读
资源评论


zcty2020
- 粉丝: 40
- 资源: 8
上传资源 快速赚钱
我的内容管理 展开
我的资源 快来上传第一个资源
我的收益
登录查看自己的收益我的积分 登录查看自己的积分
我的C币 登录后查看C币余额
我的收藏
我的下载
下载帮助


安全验证
文档复制为VIP权益,开通VIP直接复制
