Hadoop2.5.2搭建真分布式

Hadoop 2.5.2 真分布式环境搭建教程

准备工具

Hadoop 2.5.2.tar.gz 官网下载

三台虚拟机(Ubuntu 15.10)

master

node1

node2

这里可以首先建立 master 虚拟机，搭建好配置好 java 之后再克隆出另外两个虚拟机即

可。

先用 ifconfig 查看各个虚拟机的 ip 地址：

这里我的 ip 地址分别为：

Master: 192.168.19.133

Node1: 192.168.19.134

Node2: 192.168.19.135

如果有地址冲突的话，可以用如下命令修改：

sudo ifconfig eth1 192.168.xxx.xxx

表示希望修改 ip 为：192.168.xxx.xxx。

也就是建立一个专用的 hadoop 的用户组和用户，在终端输入命令如下：

sudo groupadd hadoop //

添加

hadoop

sudo useradd –s /bin/bash –d /home/yqp –m yqp –g hadoop –G root //

yqp

sudo passwd yqp //

yqp

账户添加密码

su yqp //

切换到

yqp

用户

这样添加之后，yqp 用户并不是超级用户，需要修改他为超级用户：

su qingping //

切换到超级用户

vim /etc/sudoers

采用的是 ssh 的方法通过密钥验证及数据加解密的方式进行远程安全登录操作，当然，如果

hadoop 对每个结点的访问均需要进行验证，其效率将会大大降低，所以才需要配置 SSH 免

密码的方法直接远程连入被访问结点，这样将大大提高访问效率。

可能有的 Ubuntu 版本没有自带 ssh，所以，我们先安装 openssh-server：

sudo apt-get install openssh-server

当然，如果已经安装得有的话，将会提示本软件已经安装。

然后我们键入命令：

ssh-keygen –t dsa –P ‘’ –f ~/.ssh/id_dsa

出现类似下图的内容表示成功。