CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务

4星(超过85%的资源)
所需积分/C币:35 2016-05-17 11:28:01 977KB PDF
81
收藏 收藏
举报

该文档来自CCTC 2016中国云计算技术大会。小米云平台软件工程师常冰琳发表的题为“使用Kudu搭建OLAP服务”的主题演讲,欢迎下载!
现状 CCC 2016中国云计算技术大会 Cloud Computing Technology Conference 2016 快, 离线分析 HDFS Gd吧 批量写入 实时分析? 顺序扫描 v Parquet 在线分析? 批量离线分析 HBase 随机读写 高可用性 在线事务处理 如何能够实时分析在线事 务系统实时产生的数据? 米 在线事 各 如何能够提供在线分析服 务 慢 在线事务(随机读写) 快 设计目标 CCC 2016中国云计算技术大会 Cloud Computing Technology Conference 2016 快, 支持随机读写 离线分析 接近 HBase的吞吐性能 That 更低的延迟:1ms(SSD) D∥ v Parquet 高性能的顺序读 接近HDFS的读性能 列存储,接近 Parquet性能 高可用 Raft一致性协议 米 在线事 各 类关系数据庠数据模型 支持事务单行) 计算引擎支持 慢 在线事务(随机读写) 快 Impala, Spark/ Drill/ 设计目标新硬件趋势 CCC 2016中国云计算技术大会 Cloud Computing Technology Conference 2016 存储越来越快 NAND Flash 450K read/ 250K write lOPS 3D Xpoint 性能接近内存,但是可持久化 ·性能比NAND还要快1000倍 内存越来越大 CPU成为新瓶颈,存储系统需要优化CPU 列存储应用在线事务系统也是可行的 应用场景-HDFS CCC 2016中国云计算技术大会 Cloud Computing Technology Conference 2016 可用性(MTR) HDFS 顺序读 随机读 离线数据存储 ETL等预处理 复杂分析 顺序写 随机写 应用场景 CCC 2016中国云计算技术大会 Cloud Computing Technology Conference 2016 可用性(MTTR HDFS口 Hbase 顺序读 随机读 HBase 在线事务处理 计算中的随机查询 流计算状态存储 顺序写 临机写 应用场景 CCC 2016中国云计算技术大会 Cloud Computing Technology Conference 2016 可用性(MTTR) 口HDFS□ Hbase口Kudu KI uqu 顺序读 随机读 在线分析 实时数据分析 事务数据分析 顶序写 随机写 历史 CCC 2016中国云计算技术大会 Cloud Computing Technology Conference 2016 201210 Cloudera发起 20149小米加入 2015.10对外公布,发布Beta版本 2015.12 Apache Incubator 201512小米生产环境上线 2016Q3计划1.0 Release 介绍-数据模型和使用 CCC 2016中国云计算技术大会 Cloud Computing Technology Conference 2016 数据模型:类似关系数据库表 有限固定列,支持 alter tab|e 强类型(boo,int8/16/32/64, float/ double, string etc 主键索引(支持多列) NOSQL AP Insert/Update/Delete/Scan/Get C++Java/Python Hadoop 生态集成 Impala/spark/ Drill/MapReduce/Ibis (python)

...展开详情
试读 32P CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务
立即下载 身份认证后 购VIP低至7折
一个资源只可评论一次,评论内容不能少于5个字
paxinla 感谢楼主的分享!
2016-10-23
回复
forever_lipeng 很不错的学习OLAP的资料。
2016-08-17
回复
您会向同学/朋友/同事推荐我们的CSDN下载吗?
谢谢参与!您的真实评价是我们改进的动力~
  • 签到王者

  • 技术圈认证(专家版)

  • 分享王者

关注 私信
上传资源赚钱or赚积分
最新推荐
CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务 35积分/C币 立即下载
1/32
CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务第1页
CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务第2页
CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务第3页
CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务第4页
CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务第5页
CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务第6页
CCTC 2016 小米常冰琳:使用Kudu搭建OLAP服务第7页

试读结束, 可继续读3页

35积分/C币 立即下载