### 云计算课程报告知识点梳理
#### 一、AWS实验概览
本部分涵盖了四个核心AWS实验，旨在深入了解云服务的基础架构及其应用场景。
##### 实验1：EC2实例管理
- **启动实例**：通过AWS控制台或CLI启动EC2实例。
- **观察参数**：学习如何观察EC2实例的基本参数，如类型、状态等。
- **更新安全组**：增加HTTP协议以允许Web服务访问。
- **重新定义实例大小**：调整EC2实例的类型和EBS卷容量。
- **探索EC2限制**：了解EC2服务的各项限制。
- **终止保护**：测试EC2实例的终止保护功能。
##### 实验2：Amazon EBS使用
- **新建EBS卷**：创建新的EBS卷用于持久性存储。
- **挂载EBS卷**：将EBS卷挂载到EC2实例上。
- **配置文件系统**：在EBS卷上创建和配置文件系统。
- **创建快照**：使用快照功能备份EBS卷。
- **恢复快照**：从快照中恢复数据。
##### 实验3：私有云中的Web服务
- **创建私有云**：构建基于VPC的私有云环境。
- **配置子网**：创建并配置VPC子网。
- **设置安全组**：为私有云环境配置安全组。
- **部署Web服务**：在私有云环境中部署Web服务器。
##### 实验4：MySQL数据库集成
- **创建RDS安全组**：为RDS数据库实例创建安全组。
- **配置子网组**：为数据库实例配置子网组。
- **创建RDS实例**：启动MySQL数据库实例。
- **访问数据库**：通过Web服务器访问数据库进行数据操作。
#### 二、关键问题分析与解决
- **实验一命令错误**：复制命令可能导致额外字符插入，导致命令执行失败。解决方案是手动输入命令，并检查空格和语法错误。
- **密钥文件丢失**：未保存密钥文件将导致后续操作无法继续。解决方案是重新创建实例，并注意保存密钥文件。
- **实验三子网错误**：实验指南中的子网类型标注错误。解决方案是根据实际需求调整子网类型。
- **实验四选项遗漏**：创建数据库时未选择正确的免费使用层选项。解决方案是重新创建数据库，并正确选择免费使用层选项。
#### 三、Hadoop伪分布式安装
该部分介绍Hadoop伪分布式环境的搭建过程。
##### 实验环境
- **软件工具**：使用VMware Workstation Pro和Ubuntu 18.04.1作为操作系统。
- **Hadoop版本**：采用hadoop-0.20.2版本。
##### 前期准备
- **镜像源修改**：替换为国内镜像源以加快下载速度。
- **Vim安装**：安装vim编辑器以便于文件编辑。
##### 实验步骤
1. **JDK安装与配置**
- 下载JDK压缩包，并解压至指定目录。
- 配置JAVA_HOME、JRE_HOME、CLASSPATH和PATH等环境变量。
- 重启系统验证安装结果。
2. **SSH安装与配置**
- 安装OpenSSH服务器组件。
- 检查SSH服务状态和端口监听情况。
- 关闭防火墙以确保SSH服务可用。
3. **Hadoop安装**
- 将Hadoop压缩包拷贝至虚拟机内。
4. **Hadoop配置**
- 修改hadoop-env.sh文件，设置JAVA_HOME路径。
- 编辑core-site.xml、hdfs-site.xml和mapred-site.xml等配置文件。
5. **免密码SSH设置**
- 生成SSH密钥对。
- 将公钥添加至authorized_keys文件中。
通过这些步骤，可以成功搭建起Hadoop伪分布式环境，为进一步的数据处理和分析奠定基础。这一系列实验不仅加深了对AWS服务的理解，还掌握了如何利用Hadoop进行大规模数据处理的关键技能。
