搭建完全分布式 Hadoop 集群
1.1 HDFS 集群搭建
（1）下载解压 Hadoop
首先到官网(地址:https://archive.apache.org/dist/hadoop/common/)下载 Hadoop
稳定版本的安装包，然后上传至 hadoop1 节点下的/home/hadoop/app 目录下并解压，具体
操作如下所示。
[hadoop@hadoop1 app]$ tar -zxvf hadoop-2.9.2.tar.gz //解压
[hadoop@hadoop1 app]$ ln -s hadoop-2.9.2 hadoop //创建软连接
[hadoop@hadoop1 app]$ cd /home/hadoop/app/hadoop/etc/hadoop/ //切换到配置目
录
（2）修改 HDFS 配置文件
1）修改 hadoop-env.sh 配置文件。hadoop-env.sh 文件主要配置跟 Hadoop 环境相关的
变量，这里主要修改 JAVA_HOME 的安装目录，具体操作如下所示。
[hadoop@hadoop1 hadoop]$ vi hadoop-env.sh
export JAVA_HOME=/home/hadoop/app/jdk
2）修改 core-site.xml 配置文件。core-site.xml 文件主要配置 Hadoop 的公有属性，具
体需要配置的每个属性如下所示。
[hadoop@hadoop1 hadoop]$ vi core-site.xml
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://mycluster</value>
</property>
<!--默认的 HDFS 路径-->
<property>
<name>hadoop.tmp.dir</name>
<value>/home/hadoop/data/tmp</value>
</property>
<!--hadoop 的临时目录，如果需要配置多个目录，需要逗号隔开-->
剩余13页未读，继续阅读
资源评论
爱好学习的哥哥
- 粉丝: 355
- 资源: 38
最新资源
- CM2200系列.pdf
- CM5000系列.pdf
- 大数据实验报告(已提交留档).7z
- CM1100系列.pdf
- CM7000系列（普通版）.pdf
- CP2100 系列.pdf
- CP2500 （普通版）.pdf
- CP2200系列.pdf
- 汇川H3U收卷机程序案例 收卷机完成藤条的收卷功能： 主机变频器采用力矩模式，排线伺服采用速度模式，定时中断采集主轴速度信号，排线伺服进行速度更随
- CP2500系列（智享版）.pdf
- CP1100系列.pdf
- CP5000系列.pdf
- 敏捷实践指南-中文版(可搜索、带页码）.pdf
- M9000系列.pdf
- CM9100、9700、M9100、9700系列.pdf
- docx文件转html文件word文件转html
资源上传下载、课程学习等过程中有任何疑问或建议，欢迎提出宝贵意见哦~我们会及时处理！
点击此处反馈
