阿里云Hbase PPT

所需积分/C币:11 2018-12-15 15:02:39 4.71MB PDF

阿里巴巴数据技术及产品部王赛在2017杭州云栖大会中做了题为《阿里巴巴大数据智能技术》的分享,就问题与挑战,Dataphin,关键技术变革,阿里数据中台普惠社会做了深入的分析。
2017杭州·云栖大会 HBase在大数据中的价值 天智能 THE COMPUTING CONFERENCE APSARA NTELLIGENCE HBase在大数据中的价值 云牺社区 cD12Nc工LLE 深207杭州,元相大数据库技术发展 天智能 APSARA NTELLIGENCE HBase支持实时更新、增量导入、多维删除、随机查询、范围査询、高伸缩、高可用、 高可靠、高性能、高适应分布式 NOSQL数据库。 PB 分布式存储 HBase 分库分表 分布式存储,支持海量存储,高百 万级并发! 数 分库分表 不支持事物等数据库传统需求 据 关系型数据库 解决一定容量需求,实现复杂, 业务需感知! MySQL 解决中小数据库存储需求! GB 云牺社区 深207杭州,元相大含传统关系型数据库面对的问题 天智能 APSARA NTELLIGENCE 容量 成本 无法满足TB、PB级别 一般需要特殊硬件 谷 的数据存储需求 成本较高 成本 分析 QPS QPS 分析 无法满足较高的并发要 计算资源有限,不能满足 求,性能不能横向扩展! 分析类需求 云牺社区 深207杭州,元相大新型数据库面对的办法 天智能 APSARA NTELLIGENCE 增加QPS 5存储空间无限 自动分区 存储无限 分区自动分裂 满足TB、PB级存储需求 分区在线 Merge 写吞吐高 不受SSD随机写入放大干扰 Spark on hbase 离线导入效率巨高 Phoenix、Kyli LSM-Tree Hadoop生态 高性能、高可靠性 可以满足分析需求 HDFS共建 云牺社区 2017杭州·云栖大会 产品架构 天智能 THE COMPUTING CONFERENCE APSARA NTELLIGENCE 阿里云 HBase架构 云牺社区 cD12Nc工LLE 2017杭州·云栖大会 HE COMPUTING CONFERENCE 基本架构 天智能 APSARA NTELLIGENCE 基于ⅥM的架构 VM VM 共享存储 k os dls os disk data disk data disk 模式 优势 劣势 客户推荐 存储成本下降 HBase基于共享存 延迟稍微高一些 HBase on Oss 存储计算分离 稳定性一般 历史归档 HBase基于IDFS 副本数为1、可用性一般 HD)S基于共享行储 存储计算分离 副本数为2、单位成本高 小客户首选 HBase基于HDFS 稳定性高 延迟低 起步高,灵活性差 大客广首选 IDS基于本地磁盘 SATA高于20T 单位成本低 不可存储计算分离 SSD高于4T 云盘本地盐架构基于共享在储 2017杭州·云栖大会 THE COMPUTING CONFERENCE 基本架构 运维能力 天智能 APSARA NTELLIGENCE 帐号售卖计费支付 产品层 控制台 云监控 DMS ClouddBa 接入层 数据上云CD 物联网 热升级 链路安仝 防闪断 网络层(D ser 白名单隔离 Classic VPC 容灾切换 异地灾备&多活 屮间件 SQL二级索引 多语言支持 稀疏宽表、实时史新、增量导入、随机,范围査询、多维删除 弹性伸缩 HBa 高可用自动 实例克隆 资源隔离 多版 动态列 分区 仝量/增量备份 数据TTL A⊥ L-HBase 水半扩展 强一致 键迁移 存储层 Al1-HDFS 共享作储OSS 容器编排 秒级监控 运维服务d平台 全链路监控 Robot 门动运维 机房下线 资源调度 运维部署 物理机/CS (库存管理 供应链管理 云牺社区 2017杭州·云栖大会 THE COMPUTING CONFERENCE 基本架构 运维能力 天智能 APSARA NTELLIGENCE 产品层 控制台 云监控 DMS ClouddBa 接入层 数据上云CDP 物联网 路 网络层(D ser 白名单隔离 Classic VPC 异地灾备8多 中间件 SQL二级索引 多语言支持 稀疏宽表、实时吏新、増量导入、随机,范围查询、多維删除 弹性 HB 例克隆 资源隔岗 /增量备份 提供上云方案、安全服务、公网访问、监控指标报警、方案支持 等一站的 DAas服务 存储 存储0s 运维服务 全链路监控 贪源调 维部署 物理机 云牺社区 cD12Nc工LLE

...展开详情
img
天天乐见

关注 私信 TA的资源

上传资源赚积分,得勋章
相关内容推荐