没有合适的资源?快使用搜索试试~ 我知道了~
CCTC 2016 Hulu董西成:Hadoop YARN在异构环境下应用与实践
5星 · 超过95%的资源 需积分: 9 351 下载量 17 浏览量
2016-05-17
11:35:32
上传
评论
收藏 1.27MB PDF 举报
温馨提示
试读
28页
该文档来自CCTC 2016中国云计算技术大会。Hulu大数据架构组负责人董西成发表的题为“Hadoop YARN在异构环境下应用与实践”的主题演讲,欢迎下载!
资源推荐
资源详情
资源评论
董西成
HADOOP YARN在异构环境下应用与实践
AGENDA
• Background
• Label-based scheduling
• Framework On YARN
• Experience
• Q & A
ARCHITECTURE – YARN
YARN
distributed operating system
MapReduce
Spark
(Streaming)
Voidbox
machine „ ... machine
Nesto/Pr
esto
machine
ARCHITECTURE – YARN
YARN modules
Resource
Manager
Client
NodeManager
HDFS
NodeManager
HDFS
NodeManager
HDFS
YARN application1
Container
(MapTask)
MR
AppMaster
Container
(MapTask)
Client
Applicatio
n
Master
Container
YARN application2
• Batch Jobs
• Take from a few seconds to a few days to complete
• E.g. MapReduce, Spark
• Long-running Services
• Should “never” go down, handle short-lived latency-sensitive
requests
• E.g.Presto/Nesto, Spark Streaming, Web Services
• YARN: Data Operating System
• ResourceManager HA & Recovery
• NodeManager Recovery
• Resource Scheduling(e.g. label-based scheduling)
• Apache Slider & Apache Twill
DISTRIBUTED APPLICATION TYPES
剩余27页未读,继续阅读
资源评论
- MCNU云原生2016-10-02内容不多,但是蛮有参考意义。
- dingdong00802016-08-152016中国云计算技术大会演讲嘉宾PPT
唐门教主
- 粉丝: 3788
- 资源: 92
上传资源 快速赚钱
- 我的内容管理 展开
- 我的资源 快来上传第一个资源
- 我的收益 登录查看自己的收益
- 我的积分 登录查看自己的积分
- 我的C币 登录后查看C币余额
- 我的收藏
- 我的下载
- 下载帮助
最新资源
- 【创新创业材料】某服装进入XX市市场可行性报告 .zip
- 【创新创业材料】某市图书馆建设项目可行性研究报告.zip
- 【创新创业材料】某医疗器械股份有限公司核心产品国内外营销网络建设项目可行性研究报告-优秀甲级资质可研报告.zip
- 【创新创业材料】某化工公司氨基酸原料及磷化工产品生产项目可行性研究报告-极品推荐140页优秀甲级资质可研报告.zip
- 质量运营与模式i建构分享 - 转PDF.pdf
- JAVA中Spring框架入门与实践心得.zip
- 【创新创业材料】泸州老窖中长期发展战略.zip
- 【创新创业材料】旅游地产:山东胶南小珠山旅游&文化创意地产项目可行性研究报告2008-138页.zip
- main.c
- Unity 创建快捷方式自动启动
资源上传下载、课程学习等过程中有任何疑问或建议,欢迎提出宝贵意见哦~我们会及时处理!
点击此处反馈
安全验证
文档复制为VIP权益,开通VIP直接复制
信息提交成功