没有合适的资源？快使用搜索试试~ 我知道了~

文库首页大数据Hadoopubantu安装hadoop指导文档.docx

ubantu安装hadoop指导文档.docx

ubantu

hadoop

完全分布式集群

需积分: 11 1 下载量 97 浏览量 2020-02-10 16:28:25 上传评论收藏 616KB DOCX 举报

温馨提示

试读

18页

ubantu（乌班图）安装hadoop三种模式，描述非常详细，非常适合学习大数据技术的环境准备。包括环境规划，环境配置，安装步骤等。本人反复测试过好几次，总结完成，希望对大家有所帮助。

资源推荐

资源详情

资源评论

QST

青软实训 - 推动教育与产业的无缝衔接

Ubuntu16.04 下 Hadoop 的本地安装与配置

一、系统环境

os : Ubuntu 16.04 LTS 64bit

jdk : 1.8.0_161

hadoop : 2.6.4

部署时使用的用户名为 hadoop，下文中需要使用用户名的地方请更改为自己的用户名。

准备工具：

VMware Worksta"on:创建虚拟机

FileZilla :FTP 工具

SecureCRT ：SSH 远程连接虚拟机

硬件准备：

1. 根据 hadoop 部署方式不同，需要的服务器个数不同。

部署方式为：

单机模式，伪分布模式，完全集群模式

Hadoop100-->单机模式

Hadoop101-->伪分布模式

完全集群模式至少需要三台服务器，如下：

Hadoop102

Hadoop103

Hadoop104

2. 建议服务器配置要求：

QST

青软实训 - 推动教育与产业的无缝衔接

二、安装步骤

1. 修改 root 密码

sudo passwd root

2.安装并配置 ssh

2.1 安装 ssh【重要】

输入命令：ii$ sudo apt-get install openssh-server ，安装完成后使用命令i$ ssh localhost 登录

本机。首次登录会有提示，输入 yes，接着输入当前用户登录电脑的密码即可。

2.2 配置 SSH root 登录【重要】

默认情况下，ssh 不支持 root 用户，需要修改配置。

vi  /etc/ssh/sshd_cong

把其中的“PermitRootLogin prohibit-password” 修改为“PermitRootLogin yes”

重启服务器：reboot

2.3 配置静态 IP【重要】

1.先停止 Network-manager 的服务

sudo service network-manager stop

2.修改/etc/network/interfaces 配置文件

QST

青软实训 - 推动教育与产业的无缝衔接

sudo vi /etc/network/interfaces

在文件中加入下面内容：

auto ens33

iface ens33 inet sta"c

address 192.168.1.20

netmask 255.255.255.0

gateway 192.168.1.1

dns-nameservers 192.168.1.1

注：在配置之前，先查询当前 IP 和 DNS

查询 DNS:nmcli dev show | grep 'DNS'

2. 重启网络或者重启服务器：

重启网络

/etc/init.d/networking restart

service network-manager restart

重启服务器：

reboot

4.测试配置是否成功

 查看 cat /etc/resolv.conf 文件中是否已经添加 DNS

 测试网络链接情况

2.4 永久修改主机名【重要】

在 Ubuntu 系统中永久修改主机名也比较简单。主机名存放在/etc/hostname 文件中，修改

主机名时，编辑 hostname 文件，在文件中输入新的主机名并保存该文件即可。

2.5 修改 Hosts 文件【重要】

修改/etc/hosts 文件种的 IP 和 hostname

QST

青软实训 - 推动教育与产业的无缝衔接

重启网络服务：sudo /etc/init.d/networking restart

2.5 关闭防火墙

1、关闭防火墙

#sudo ufw disable

关闭了防火墙，并取消了开机自启动。

2、查看防火墙状态：

#sudo ufw status

3、开启防火墙：

#sudo ufw enable

2.6 VI 编辑器换行和退格键问题（可选）

1. sudo vi /etc/vim/vimrc."ny

2. vim:set <=vim:前面的iiset compa"ble 修改为iset nocompa"ble 解决方向键问题

再在下面加上iset backspace=2 修改退格键问题

2.7 配置 ssh 无密码登录（完全集群模式）【重要】

需要配置下面两个 ssh 无密码登录：

1. Hadoop102->hadoop103,hadoop4,hadoop102 的 ssh 无密码登录。配置 Root 用户和

haddop 用户。 Hadoop102 上部署了 NameNode ，需要管理

剩余17页未读，继续阅读

评论收藏

内容反馈

资源评论

资源反馈

评论星级较低，若资源使用遇到问题可联系上传者，3个工作日内问题未解决可申请退款~

amingo_ss

粉丝: 99
资源: 5

上传资源快速赚钱

我的内容管理展开

我的资源快来上传第一个资源

我的收益

登录查看自己的收益

我的积分登录查看自己的积分

我的C币登录后查看C币余额

我的收藏

我的下载

下载帮助

前往需求广场，查看用户热搜

ubantu安装hadoop指导文档.docx

ubuntu搭建hadoop单节点.docx

Ubuntu_Hadoop分布部署.docx

完整版hadoop习题册.docx

hadoop安装文档

hadoop安装详细文档

centos7 安装 hadoop 2.7.3集群.docx

hadoop1安装.docx

(完整版)hadoop习题册.docx

Hadoop安装手册.docx

hadoop-安装文档

hadoop安装和配置.docx

hadoop安装与部署.docx

hadoop安装配置.docx

hadoop单节点安装.docx

虚拟机安装ubuntu和hadoop.docx

hadoop集群安装.docx

ubuntu下hadoop配置指南.docx

大数据平台MPP与Hadoop架构分析.docx

hadoop复习题.docx

Hadoop体系架构.docx

hadoop搭建过程.docx

Hadoop大数据概述.docx

Hadoop是什么.docx

Hadoop搭建教程.docx

项目源码：基于Hadoop+Spark招聘推荐可视化系统 大数据项目 计算机毕业设计

hadoop-3.3.4.tar.gz + winutils 安装环境

最新资源

项目源码：基于Hadoop+Spark招聘推荐可视化系统大数据项目计算机毕业设计