docker配置hadoop
需积分: 0 44 浏览量
2023-09-28
13:07:24
上传
评论
收藏 999KB PDF 举报
基
于
Docker
构
建
Hadoop
平
台
------ written by Mike.Wang 2022.07.15
0.
绪
论
使
⽤
Docker
搭
建
Hadoop
技
术
平
台
，
包
括
安
装
Docker
、
Java
、
Scala
、
Hadoop
、
Hbase
、
Spark
。
集
群
共
有
5
台
机
器
，
主
机
名
分别
为
h01
、
h02
、
h03
、
h04
、
h05
。
其
中
h01
为
master
，
其
他
的
为
slave
。
虚
拟
机
配
置
：
建
议
1
盒
2
线
程
、
8G
内
存
、
30G
硬
盘
。
最
早
配
置
4G
内
存
，
HBase
和
Spark
运
⾏
异
常
。
JDK 1.8
Scala 2.11.12
Hadoop 3.3.3
Hbase 3.0.0
Spark 3.3.0
1. Docker
1.1 Ubuntu 22.04
安
装
Docker
在
Ubuntu
下
对
Docker
的
操
作
都
需
要
加
上
sudo
，
如
果
已
经
是
root
账
号
了
，
则
不
需
要
。
如
果
不
加
sudo
，
Docker
相
关
命
令会
⽆
法
执
⾏
。
在
Ubuntu
下
安
装
Docker
的
时
候
需
在
管
理
员
的
账
号
下
操
作
。
安
装
完
成
之
后
，
以
sudo
启
动
Docker
服
务
。
显
⽰
Docker
中
所
有
正
在
运
⾏
的
容
器
，
由
于
Docker
才
安
装
，
我
们
没
有
运
⾏
任
何
容
器
，
所
以
显
⽰
结
果
如
下
所
⽰
。
1.2
使
⽤
Docker
现
在
的
Docker
⽹
络
能
够
提
供
DNS
解
析
功
能
，
我
们
可
以
使
⽤
如
下
命
令
为
接
下
来
的
Hadoop
集
群
单
独
构
建
⼀个
虚
拟
的
⽹
络
。
可
以
采
⽤
直
通
、
桥
接
或
macvlan
⽅
式
，
这
⾥采
⽤
桥
接
模
式
，
可
以
做
到
5
台
主
机
互
联
，
并
能
访
问
宿
主
机
和
⽹
关
，
可
以
连
接
外
⽹
，
便
于
在
线
下
载
程
序
资
源
。
以
上
命
令
创
建
了⼀个
名
为
hadoop
的
虚
拟
桥
接
⽹
络
，
该
虚
拟
⽹
络
内
部
提
供
了
⾃
动
的
DNS
解
析
服
务
。
使
⽤
下
⾯
这
个
命
令
查
看
Docker
中
的
⽹
络
，
可
以
看
到刚刚创
建
的
名
为
hadoop
的
虚
拟
桥
接
⽹
络
。
mike@ubuntu2204:~$ wget -qO- https://get.docker.com/ | sh
mike@ubuntu2204:~$ sudo service docker start
mike@ubuntu2204:~$ sudo docker ps
CONTAINER ID IMAGE COMMAND CREATED STATUS PORTS NAMES
mike@ubuntu2204:~$
mike@ubuntu2204:~$sudo docker network create --driver=bridge hadoop
剩余22页未读，继续阅读
资源评论
