没有合适的资源?快使用搜索试试~ 我知道了~
centos 7.9下RPM包部署CDH6.2.0安装(多次安装,绝对无坑)
需积分: 5 2 下载量 62 浏览量
2023-03-01
08:07:55
上传
评论
收藏 3.46MB DOCX 举报
温馨提示
试读
30页
centos 7.9下RPM包部署CDH6.2.0安装(多次安装,绝对无坑) cloudera manager、CDH、CDH6、hadoop、hive....
资源推荐
资源详情
资源评论
centos 7.9 下 RPM 包部署 CDH6.2.0 安装
(多次安装,绝对无坑)
by Comer
2023/3/1
230043@qq.com
目录
centos 7.9 下 RPM 包部署 CDH6.2.0 安装(多次安装,绝对无坑) ......................................1
一、安装环境准备....................................................................................................................................3
1.1 三台服务器配置网络 ........................................................................................................3
1.2 配置主机名(每个节点) .....................................................................................................3
1.3 关闭防火墙...........................................................................................................................3
1.4 关闭 SELinux ......................................................................................................................3
1.5 调整最大文件打开数:....................................................................................................4
1.6 swappiness 设置为最大值 10 ......................................................................................4
1.7 关闭透明大页: .................................................................................................................4
1.8 配置免密登陆......................................................................................................................6
1.9 ntp 配置结束时钟同步 ....................................................................................................6
1.10 yum 源配置..........................................................................................................................7
1.11 安装 JDK..........................................................................................................................7
1.12 安装 mysql5.7.27..........................................................................................................7
二、安装 CM 和 CDH.........................................................................................................................9
2.1 安装依赖包...........................................................................................................................9
2.2 创建目录.............................................................................................................................10
2.3 创建 cloudera-scm 用户(所有节点)....................................................................10
2.4 解压并安装 CM................................................................................................................10
2.5 初始脚本.............................................................................................................................11
2.6 配置从节点 ........................................................................................................................12
2.7 准备 parcels ......................................................................................................................12
2.8 创建 parcels 目录(所有节点) ................................................................................13
三、启动 CM 服务.................................................................................................................................13
3.1 启动主节点 ........................................................................................................................13
3.2 启动 cloudera-scm-agent 服务(所有节点)。 ........................................................15
四、初始化 Cloudera Manager....................................................................................................15
五、搭建 http 服务...............................................................................................................................16
六、访问 WebUI ...................................................................................................................................17
END ......................................................................................................................................................................29
一、安装环境准备
1.1 三台服务器配置网络
根据自己环境进行网络设置,以下命令仅作为参考:
nmcli con modify ens192 ipv4.addresses 10.133.23.31/26
ipv4.gateway 10.133.23.62 ipv4.method manual ipv4.dns 1
0.10.10.241 connection.autoconnect on
nmcli con up ens192
1.2 配置主机名(每个节点)
使用命令设置主机名称:
hostnamectl set-hostname cmtest1
hostnamectl set-hostname cmtest2
hostnamectl set-hostname cmtest3
修改文件/etc/hosts,增加如下内容:
vim /etc/hosts
10.133.23.31 cmtest1
10.133.23.32 cmtest2
10.133.23.33 cmtest3
1.3 关闭防火墙
systemctl disable firewalld.service
systemctl stop firewalld.service
1.4 关闭 SELinux
sed -i 's#SELINUX=enforcing#SELINUX=disabled#g' /etc/selinux/c
onfig
1.5 调整最大文件打开数:
vim /etc/security/limits.conf
* soft nofile 65535
* hard nofile 65535
* soft nproc 65535
* hard nproc 65535
1.6 swappiness 设置为最大值 10
echo vm.swappiness = 10 >> /etc/sysctl.conf
1.7 关闭透明大页:
手动执行:
echo never > /sys/kernel/mm/transparent_hugepage/defrag
echo never > /sys/kernel/mm/transparent_hugepage/enabled
修改:vim /etc/rc.local
第一种方式(建议此方式):
echo never > /sys/kernel/mm/transparent_hugepage/defrag
echo never > /sys/kernel/mm/transparent_hugepage/enabled
echo 'echo never > /sys/kernel/mm/redhat_transparent_hugepage/defrag' >>
/etc/rc.local
echo 'echo never > /sys/kernel/mm/redhat_transparent_hugepage/enabled' >>
/etc/rc.local
第二种方式:
#永久修改 hugepage
sudo chmod +x /etc/rc.d/rc.local
vim /etc/rc.d/rc.local
剩余29页未读,继续阅读
资源评论
Comer
- 粉丝: 25
- 资源: 12
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功