Hadoop单机伪分布式搭建教程1
需积分: 0 85 浏览量
2022-08-04
16:50:31
上传
评论
收藏 876KB PDF 举报
Hadoop单机伪分布式环境搭建
微信公众号：小康新鲜事儿
Hadoop单机伪分布式环境搭建
一、前提条件
二、Hadoop(HDFS和YARN)环境搭建
3.1 下载并解压
3.2 配置环境变量
3.3 修改Hadoop配置
1. hadoop-env.sh
2. core-site.xml
3. hdfs-site.xml
4. mapred-site.xml
5. yarn-site.xml
6. slaves
3.4 关闭防火墙
3.5 初始化
3.6 启动HDFS和YARN
3.7 验证是否启动成功
3.8 单机伪分布式官方wordcount案例测试
三、配置任务的历史服务器
四、开启日志聚集功能
五、日志文件
一、前提条件
Hadoop的运行依赖 JDK，需要预先安装，安装步骤见：
Hadoop前置准备
Linux下jdk的安装
二、Hadoop(HDFS和YARN)环境搭建
3.1 下载并解压
下载 Hadoop 安装包，这里我下载的是hadoop-2.7.7.tar.gz
3.2 配置环境变量
在原来jdk基础上更新配置环境变量：
[xiaokang@hadoop ~]$ sudo tar -zxvf hadoop-2.7.7.tar.gz -C /opt/software/
[xiaokang@hadoop ~]$ sudo vim /etc/profile
资源评论
