Hadoop安装教程_单机/伪分布式配置_Hadoop2.7.1/Ubuntu 16.04

Hadoop安装教程_单机/伪分布式配置_Hadoop2.7.1/Ubuntu 16.04 本教程主要讲述了在 Ubuntu 16.04 环境下安装 Hadoop 2.7.1 的步骤，包括单机模式、伪分布式模式和分布式模式三种安装方式。以下是本教程的知识点总结： 1. 安装前的准备工作：创建 hadoop 用户，设置密码，增加管理员权限，更新 apt 软件源。 2. 单机模式安装：Hadoop 的默认模式为非分布式模式，无需进行其他配置即可运行。非分布式模式即单 Java 进程，方便进行调试。 3. 伪分布式模式安装：Hadoop 可以在单节点上以伪分布式的方式运行，Hadoop 进程以分离的 Java 进程来运行，节点既作为 NameNode 也作为 DataNode，同时，读取的是 HDFS 中的文件。 4. 分布式模式安装：使用多个节点构成集群环境来运行 Hadoop。 5. 安装 SSH 服务器：Ubuntu 默认已安装了 SSH 客户端，此外还需要安装 SSH 服务器，以便在单节点模式和分布式模式下使用 SSH 登录。 6. 配置 SSH 无密码登录：使用 ssh-keygen 生成密钥，并将密钥加入到授权中，使得可以无需输入密码直接登录。 7. 安装 JDK：可以离线或在线安装 JDK，安装步骤包括创建文件夹、解压文件、设置环境变量等。 8. 安装 Hadoop：将 Hadoop 安装至 /usr/local/ 中，包括解压 Hadoop 文件、设置环境变量等步骤。 9. 检查 Hadoop 安装结果：使用 echo 命令和 java 命令来检查 Hadoop 是否安装成功。 在本教程中，我们学习了 Hadoop 的三种安装方式，包括单机模式、伪分布式模式和分布式模式，每种模式都有其特点和应用场景。同时，我们还学习了安装 SSH 服务器、配置 SSH 无密码登录、安装 JDK 和安装 Hadoop 的步骤。