这篇博客,Alice为大家带来的是Spark集群环境搭建之——standalone集群模式。
文章目录集群角色介绍集群规划修改配置并分发启动和停止查看web界面测试
集群角色介绍
Spark是基于内存计算的大数据并行计算框架,实际中运行计算任务肯定是使用集群模式,那么我们先来学习Spark自带的standalone集群模式了解一下它的架构及运行机制。
Standalone集群使用了分布式计算中的master-slave模型
master是集群中含有master进程的节点
slave是集群中的worker节点含有Executor
- 1
- 2
前往页