Hadoop生态环境(一).pdf
版权申诉
50 浏览量
2022-10-30
23:18:28
上传
评论
收藏 849KB PDF 举报
1.概述
最近收到一些同学和朋友的邮件，说能不能整理一下 Hadoop 生态圈的相关内容，然
后分享一些，我觉得这是一个不错的提议，于是，花了一些业余时间整理了Hadoop 的生
态系统，并将其进行了归纳总结，进而将其以表格的形式进行了罗列。涉及的内容有以下几
点：
分布式文件系统
分布式编程模型
NoSQL 数据库
SQL-On-Hadoop
数据采集
编程服务中间件
调度系统
系统部署
数据可视化
2.内容
2.1 分布式文件系统
2.1.1 Apache HDFS
在分布式文件系统当中，首先为大家所熟悉的是 Apache 的 HDFS。全称为 Hadoop
Distributed File System，由多台机器组建的集群，存储大数据文件。HDFS 的灵感来自
于 Google File System（GFS）。Hadoop 2.x 版本之前，NameNode 是存在单点故
障的。在 ZooKeeper 的高可用性功能解决了 HDFS 的这个问题，通过提供运行两个冗
余的节点在同一个集群中进行主备切换，即：Active & Standby
相关链接地址如下所示：
1.
2.
3.
4.
Apache Hadoop
Google File System
Cloudera
Hortonworks
2.1.2 Red Hat GlusterFS
剩余11页未读，继续阅读
评论0
最新资源