从2021年1月31日开始,所有Cloudera软件都需要有效的订阅,并且只能通过付费墙进行访问。也就是说CDH各版本都不能免费获取了。
整个过程不需要依赖外网,全部为离线安装。
包括:
manifest.json
CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel
CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha
CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha256
cloudera-manager-server-6.3.0-2117683.el7.x86_64.rpm
cloudera-manager-agent-6.3.0-2117683.el7.x86_64.rpm
cloudera-manager-daemons-6.3.0-2117683.el7.x86_64.rpm
oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm
### CDH 6.3.2 安装包与下载指南
#### 一、背景介绍
自2021年1月31日起,Cloudera宣布其所有软件产品(包括Cloudera Data Hub,简称CDH)均需有效的订阅才能获取。这意味着用户无法再像以往那样免费下载CDH的各种版本。对于希望部署CDH 6.3.2的用户而言,了解如何在不依赖外部网络的情况下完成离线安装变得尤为重要。
#### 二、CDH 6.3.2 安装包组成
CDH 6.3.2 的安装包主要包含了以下文件:
1. **manifest.json**:这是一个JSON格式的配置文件,其中包含了Parcel中各个组件的信息。它用于指导Cloudera Manager如何正确地安装和配置这些组件。
2. **CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel**:这是CDH 6.3.2的主要安装包,包含了所有必要的组件和服务。该文件通常很大,因为包含了大量的库和配置文件。
3. **CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha** 和 **CDH-6.3.2-1.cdh6.3.2.p0.1605554-el7.parcel.sha256**:这两个文件提供了安装包的SHA1和SHA256校验码,用于验证下载的安装包完整性和真实性。通过比较下载文件的哈希值与提供的哈希值,可以确保安装包没有被篡改或损坏。
4. **cloudera-manager-server-6.3.0-2117683.el7.x86_64.rpm**、**cloudera-manager-agent-6.3.0-2117683.el7.x86_64.rpm** 和 **cloudera-manager-daemons-6.3.0-2117683.el7.x86_64.rpm**:这三个RPM包分别用于安装Cloudera Manager的服务器端、代理端以及守护进程。它们是管理CDH集群所必需的组件。
5. **oracle-j2sdk1.8-1.8.0+update181-1.x86_64.rpm**:这是Oracle JDK 1.8的RPM包,用于提供Java运行环境。Cloudera Manager和其他许多CDH组件都依赖于JDK来运行。
#### 三、离线安装步骤
##### 1. 准备工作
- **获取订阅**:首先需要通过官方渠道获取有效的Cloudera订阅,以获取上述安装包。
- **下载安装包**:根据订阅权限,从Cloudera官方网站下载所需的安装包到本地计算机。
- **验证完整性**:使用提供的SHA1和SHA256校验码验证下载文件的完整性。
##### 2. 传输文件至目标服务器
- **FTP/SFTP**:通过FTP或SFTP将安装包传输至目标服务器。
- **USB/网络共享**:如果条件允许,也可以使用USB或网络共享的方式进行传输。
##### 3. 安装Cloudera Manager
- 使用Cloudera Manager Server的RPM包进行安装,并配置相关设置。
- 安装Cloudera Manager Agent和Daemons RPM包到集群中的其他节点上。
##### 4. 部署CDH Parcel
- 将CDH Parcel上传至Cloudera Manager Server,然后通过Cloudera Manager进行部署。
##### 5. 配置与启动服务
- 根据实际需求配置CDH中的各项服务。
- 启动服务并监控运行状态。
#### 四、注意事项
- 在进行离线安装时,确保所有必要的安装包都已经准备齐全,并且已经传输到了目标服务器上。
- 在安装过程中,注意检查JDK版本是否符合要求,以及Cloudera Manager的版本是否与CDH版本相匹配。
- 在配置服务时,仔细阅读文档,确保各项参数设置正确无误。
通过以上步骤,用户可以在不依赖外部网络的情况下顺利完成CDH 6.3.2的安装与配置。这对于那些处于受限网络环境下的组织来说尤其重要。