Windows环境下Hadoop开发环境配置.docx
版权申诉
64 浏览量
2022-10-30
23:24:04
上传
评论
收藏 314KB DOCX 举报
Windows 环境下 Hadoop 开发环境配置
一、 事先准备
1) Hadoop 集群环境搭建
已经用三台虚拟机(操作系统为 ubuntu 10.0.4)搭建完成一个 hadoop 分布式集群，分别
是 hadoop1: 192.168.201.104，hadoop2: 192.168.201.54 和 hadoop3: 192.168.201.100 ，其中
hadoop1 为 namenode，其余为 datanode。
2) windows 安装 JDK 和 eclipse
过程从略，需要注意应安装与 hadoop 集群所用 JDK 兼容的版本。本例中，hadoop 集群
安装的是 64 位的 JDK-8.0.20，因此 Windows 下选择 64 位的 JDK-8.0.65，eclipse 版本为支持
64 位的 Kepler Service Release 2。
3) hadoop 安装包解压
将搭建 hadoop 集群的安装包拷贝并解压到 windows 开发机器的某个目录下，本例中的
安装包为 hadoop-2.6.1.tar.gz，解压到 D:\hadoop-2.6.1 目录。
4) hadoop for eclipse 插件包下载
下载 hadoop for eclipse 插件。由于本例中 hadoop 集群为 hadoop2，插件也必须是 2.x
版本。本例中插件包为：hadoop-eclipse-plugin-2.2.0。
二、 配置 eclipse
1) 拷贝插件包
将插件包拷贝至 eclipse 安装目录的 plugin 目录下，然后重启 eclipse。
2) 配置 hadoop 安装路径
打开"Window"--"Prefrences"，此时左侧会出现"Hadoop Map/Reduce"选项，将其配置为
hadoop 安装包解压后的目录。
3) 配置 Map/Reduce Locations
打 开 "Window"--"Perspectives"--"Open Perspective"--"Other ..."， 在 弹 出 窗 口 中 选 择
"Map/Reduce"，点击"OK"。
评论0
最新资源