没有合适的资源?快使用搜索试试~ 我知道了~
word源码java-spark_demo:spark_demo
共9个文件
scala:3个
sbt:2个
gitignore:1个
需积分: 11 0 下载量 108 浏览量
2021-06-05
23:37:58
上传
评论
收藏 9KB ZIP 举报
温馨提示
word源码java 说明: yarn-client相当于是命令行 会将你输入的代码提交到yarn上面执行 yarn-cluster是将你写好的程序打成jar包然后提交到yarn上面去执行 然后yarn会将jar包分发到各个节点 并负责资源分配和任务管理 rack: null) dead for group 错误 参考: kafka server.properties 需要配置: listeners=PLAINTEXT://192.168.0.104:9092 , 不能够是PLAINTEXT://:9092 参考: spark on yarn 的支持两种模式 1)yarn-cluster:适用于生产环境; 2)yarn-client:适用于交互、调试,希望立即看到app的输出 spark on yarn 开发环境搭建: 集群规划:(不启动HA) 主机名 IP 安装的软件 运行的进程 c7 192.168.0.107 jdk、scala、hadoop、spark nameNode、ResourceManager、Master c8 192.168.0.108 jdk、sca
资源推荐
资源详情
资源评论
收起资源包目录
spark_demo-master.zip (9个子文件)
spark_demo-master
.gitignore 339B
project
plugins.sbt 0B
build.properties 19B
src
main
scala
META-INF
MANIFEST.MF 53B
kafka
ReceiveTest.scala 2KB
hdfs
WorldCountHdfs.scala 1KB
rdd
WorldCountRdd.scala 470B
README.md 9KB
build.sbt 336B
共 9 条
- 1
资源评论
weixin_38651540
- 粉丝: 5
- 资源: 916
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功