三台机子
先设置域名解析
上传压缩包
hadoop-3.3.6.tar.gz
解压并配置环境变量
tar -zxvf hadoop-3.3.6.tar.gz -C ../soft/
mv hadoop-3.3.6/ hadoop336 # 需要进入到 soft 目录中,或者写全路劲
vim ~/.bashrc
# 添加如下内容
export HADOOP_HOME=hadoop 所在目录
export PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH
# 配置完成后需要使配置文件生效
source ~/.bashrc
echo $PATH # 查看 path 变量是否配置完成
需要编写 hadoop 目录下的配置文件配置文件在 hadoop 安装目录下面的 etc/hadoop/下
workers 配置 datanode 所在主机
hadoop-env.sh 配置 hadoop 的相关环境
core-site.xml hadoop 的核心配置文件
hdfs-site.xml hdfs 的核心配置文件
vim workers # 需要确保在 hadoop 安装目录下的 etc/hadoop 目录中
# 添加节点名称
node1 # 填写主机名需要再系统配置文件中/etc/hosts 中配置 ip 映射
node2
node3
配置 hadoop-env.sh
在配置文件中需要指定:
JAVA_HOME,
HADOOP_LOG_DIR,
HADOOP_CONF_DIR
vim hadoop-env.sh
export JAVA_HOME=jdk 目录路劲
export HADOOP_LOG_DIR=hadoop 日志存放路劲
export HADOOP_CONF_DIR=hadoop 配置文件路劲 hadoop 安装目录下的 etc/hadoop 中
资源评论
