### 在Ubuntu 14.04 LTS下通过Cloudera CDH 5.4.8搭建Hadoop集群
#### 1. 前期准备工作
##### 1.1 集群规划
为了构建一个高效的Hadoop集群，首先需要对硬件资源进行合理规划。根据文档中的描述，该集群共有8台服务器，每台服务器配备CiscoUCSC220M3型号，拥有1TB硬盘和64GB内存。这些资源被分为不同的角色：
- **tehdmonitor**（10.167.192.231）：Cloudera Manager服务端，用于监控集群状态和管理集群；
- **tehdname1**（10.167.192.224）：主Namenode，负责处理文件系统的元数据；
- **tehdname2**（10.167.192.225）：Secondary Namenode，用于辅助Namenode的工作，定期合并fsimage和editlogs文件；
- **tehdresmgr**（10.167.192.226）：YARN的ResourceManager，协调集群资源；
- **tehdapp1~tehdapp4**（10.167.192.227~10.167.192.230）：运行其他非核心相关部件。
这样的分配既保证了集群的核心组件能够高效运行，也留出了空间来扩展其他功能。
##### 1.2 安装Ubuntu操作系统
针对CiscoUCSC220M3平台，推荐使用U盘安装Ubuntu 14.04 LTS。需要注意的是，在BIOS设置中应确保南桥选项下的RAID模式为Intel，这样才能使系统正确识别硬盘。如果之前配置了LSI RAID，则需先在BIOS中将其切换为LSI RAID模式并清除所有RAID配置，然后再设置为Intel RAID模式。此外，由于CDH不建议使用RAID，故无需在此过程中配置任何RAID。
##### 1.3 系统配置
为了确保CDH的顺利安装与运行，还需要进行一系列的系统配置工作：
- **安装SSH**：SSH是Cloudera Manager管理和维护集群的基础，可通过`sudo apt-get update`和`sudo apt-get -y --force-yes install ssh`进行安装。
- **安装ntp**：同步时间服务对分布式系统尤为重要，可通过`sudo apt-get -y --force-yes install ntp`进行安装。
- **配置无密码sudo提升至root用户**：为简化管理流程，需要创建一个新用户（例如leon），并配置其可以在无需输入密码的情况下通过sudo提升到root权限。这可以通过编辑`/etc/sudoers.d/nopasswd`文件实现。
- **配置网络**：集群中的每台服务器都需要配置固定的IP地址，这可以通过修改`/etc/network/interfaces`文件来实现。例如，设置eth0接口的IP地址为10.167.192.231，子网掩码为255.255.252.0，网关为10.167.192.1。
- **配置hosts文件**：确保每台服务器上的`/etc/hosts`文件正确地包含了所有节点的IP地址和主机名映射关系，这对于集群内的通信至关重要。
以上配置完成后，应重启所有节点以确保配置生效。
#### 2. 安装Cloudera CDH 5.4.8
完成了前期准备工作后，接下来可以按照Cloudera官方文档的指引安装CDH 5.4.8。这通常涉及以下几个步骤：
1. **下载Cloudera Manager安装包**：从Cloudera官网下载对应版本的Cloudera Manager安装包。
2. **安装Cloudera Manager Server**：在tehdmonitor节点上安装Cloudera Manager Server。
3. **添加Repository**：配置Cloudera Manager以使用CDH 5.4.8的仓库。
4. **部署Hadoop组件**：通过Cloudera Manager界面部署Hadoop相关组件，如HDFS、YARN等。
5. **配置Hadoop集群**：根据实际需求配置Hadoop集群参数，包括存储位置、副本数量等。
6. **启动Hadoop集群**：完成配置后，启动Hadoop集群并验证其正常运行。
通过以上步骤，可以成功在Ubuntu 14.04 LTS环境下通过Cloudera CDH 5.4.8搭建出一个功能完备的Hadoop集群。在整个过程中，关键是要仔细遵循官方指南和最佳实践，确保每个环节的准确性，从而避免潜在的问题和错误。
