在Ubuntu10.04上分布式部署Hadoop0.20.2.doc资源-CSDN文库

版权申诉

95 浏览量 2023-09-18 20:19:41 上传评论收藏 45KB DOC 举报

资源推荐

资源详情

资源评论

在 Ubuntu10.04 上分布式部署 Hadoop0.20.2

首先做一下简要说明，Ubuntu 是装在虚拟机上的，虚拟机既存在不同的主机上，寄存

主机在同一个内网里，这里有一个注意点，Network 的连接方式要用桥接（Bridged），这样

能使 VM 的 IP 和 Host 在同一个网段，能保证 VM 之间能够互相 ping 的通。

分布式结构如下，一个 namenode 和一个 datanode：

172.28.0.73 hadoop-namenode

172.28.0.77 hadoop-datanode1

下面进入正文，安装配置：

一、hostname 的配置操作

1、修改 hosts 文件，如下：

sudo su root

gedit /etc/hosts 修改内容如下：

172.28.0.73 hadoop-namenode

172.28.0.77 hadoop-datanode1

2 、修改 hostname ， namenode 上修改为 hadoop-namenode ， datanode 修改为

hadoop-datanode1，我这里只演示 namenode 上的操作，以下同上，有特别的地方我会说

明的。

hostname hadoop-namenode

这样不能彻底修改 hostname（主机名），重启后还会还原到默认的 Ubuntu，要彻底修改

要修改/etc/hostname，namenode 和 datanode 各自修改为自己的 hostname

gedit /etc/hostname hadoop-namenode

把原来的 Ubuntu 删掉，不要用#注释，直接删掉，因为#没用，修改内容：

hadoop-namenode

退出 shell 客户端，重新进入，并且换成 root 操作

exit

sudo su root

3、这些工作都做好了，ping 一下看看能不能 ping 通，用节点名称 ping

ping hadoop-datanode1

二、安装 jdk 用的是截至 2011/1/6 最新的版本 jdk-6u23-linux-i586.bin

1、把 jdk 安装文件拷贝到/usr/lib 目录下，然后安装

cp jdk-6u23-linux-i586.bin /usr/lib

cd /usr/lib

chmod u+x chmod

./jdk-6u23-linux-i586.bin

2、安装已完成修改环境变量并且把 java 安装到系统

配置环境变量，编写一个 java.sh 放到/etc/profile.d 下面，内容如下：

#set jdk environment

export JAVA_HOME=/usr/lib/jdk1.6.0_23

export JRE_HOME=/usr/lib/jdk1.6.0_23/jre

export CLASSPATH=.:$CLASSPATH:$JAVA_HOME/lib:$JAVA_HOME/jre/lib

本内容试读结束，登录后可阅读更多

下载后可阅读完整内容，剩余3页未读，立即下载

内容反馈

版权申诉

小小哭包

粉丝: 1899
资源: 3860

最新资源

资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！点击此处反馈

feedback-tip