没有合适的资源?快使用搜索试试~ 我知道了~
资源推荐
资源详情
资源评论
















!
!
!
!
REDHAT7.2 安装 CDH5.10 和 Kudu1.2!
2017/03/29!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!!李磊!
! !

!
1! 概述!........................................................................................................................................................!4!
2! 前期准备!...............................................................................................................................................!4!
2.1! hostname 及 hosts 配置!........................................................................................................!4!
2.2! 禁用 SELinux!..............................................................................................................................!5!
2.3! 关闭防火墙!.................................................................................................................................!5!
2.4! 集群时钟同步!............................................................................................................................!6!
2.5! 配置操作系统 repo!.................................................................................................................!7!
2.6! 安装 http 服务!...........................................................................................................................!8!
2.7! 安装 MariaDB!............................................................................................................................!8!
3! Cloudera!Manager 安装!.......................................................................................................................!13!
3.1! 配置本地 repo 源!..................................................................................................................!13!
3.2! 安装 Cloudera!Manager!Server!.......................................................................................!16!
4! CDH 安装!...................................................................................................................................................!17!
4.1! CDH 集群安装向导!...............................................................................................................!17!
4.2! 集群设置安装向导!................................................................................................................!26!
5! Kudu 安装!..................................................................................................................................................!31!
5.1! 安装 csd 文件!..........................................................................................................................!31!
5.2! 安装 Kudu 服务!......................................................................................................................!31!
5.3! 配置 Impala!.............................................................................................................................!35!
6! 快速组件服务验证!........................................................................................................................!36!

!
6.1! HDFS 验证(mkdir+put+cat+get)!....................................................................................!36!
6.2! Hive 验证!..................................................................................................................................!36!
6.3! MapReduce 验证!...................................................................................................................!38!
6.4! Impala 验证!.............................................................................................................................!41!
6.5! Spark 验证!................................................................................................................................!43!
6.6! Kudu 验证!.................................................................................................................................!44!
!
!
!
!
!
!
!
!
!
!
!
!
!

!
1 概述"
!!!!本文档描述 REDHAT7.2 操作系统部署 CDH 企业版的过程。Cloudera 企业级数据
中心的安装主要分为 4 个步骤:!
1. 集群服务器配置,包括安装操作系统、关闭防火墙、同步服务器时钟等;!
2. 外部数据库安装!
3. 安装 Cloudera 管理器;!
4. 安装 CDH 集群;!
5. 集群完整性检查,包括 HDFS 文件系统、MapReduce、Hive 等是否可以正常运
行。!
这篇文档将着重介绍 Cloudera 管理器与 CDH 的安装,并基于以下假设:!
1. 操作系统版本:REDHAT7.2!
2. MariaDB 数据库版本为 10.2.1!
3. CM 版本:CDH!5.10!
4. CDH 版本:CDH!5.10!
5. 采用 ec2-user 对集群进行部署!
6. 您已经下载 CDH 和 CM 的安装包!
2 前期准备"
2.1 hostname 及 hosts 配置"
! 集群中各个节点之间能互相通信使用静态 IP 地址。IP 地址和主机名通过/etc/hosts
配置,主机名/etc/hostname 进行配置。!
以 cm 节点(172.31.2.159)为例:!

!
l hostname 配置!
/etc/hostname 文件如下:!
ip-172-31-2-159
或者你可以通过命令修改立即生效!
[ec2-user@ip-172-31-2-159 ~]$ sudo hostnamectl set-hostname ip-172-31-2-159
注意:这里修改 hostname 跟 REDHAT6 的区别!
l hosts 配置!
/etc/hosts 文件如下:!
172.31.2.159 ip-172-31-2-159
172.31.12.108 ip-172-31-12-108
172.31.5.236 ip-172-31-5-236
172.31.7.96 ip-172-31-7-96
以上两步操作,在集群中其它节点做相应配置。!
2.2 禁用 SELinux"
在所有节点执行 sudo!setenforce!0! 命令,此处使用批处理 shell 执行:!
[ec2-user@ip-172-31-2-159 ~]$ sh ssh_do_all.sh node.list "sudo setenforce 0"
集群所有节点修改/etc/selinux/config 文件如下:!
SELINUX=disabled
SELINUXTYPE=targeted
2.3 关闭防火墙"
集群所有节点执行! sudo!systemctl!stop 命令,此处通过 shell 批量执行命令如下:!
[ec2-user@ip-172-31-2-159 ~]$ sh ssh_do_all.sh node.list "sudo systemctl stop
firewalld"
[ec2-user@ip-172-31-2-159 ~]$ sh ssh_do_all.sh node.list "sudo systemctl
剩余48页未读,继续阅读
资源评论


macy212
- 粉丝: 0
- 资源: 11
上传资源 快速赚钱
我的内容管理 展开
我的资源 快来上传第一个资源
我的收益
登录查看自己的收益我的积分 登录查看自己的积分
我的C币 登录后查看C币余额
我的收藏
我的下载
下载帮助


会员权益专享
安全验证
文档复制为VIP权益,开通VIP直接复制
