目 录
一、项目建设背景......................................................................................................................................................................................3
二、高性能高并发的数据存储建设痛点 ............................................................................................................................................3
1、是否坚持所有数据一致性原则 .............................................................................................................. 3
2、非关系型数据库选型 ............................................................................................................................. 4
三、建设实践 ...............................................................................................................................................................................................6
1、关系型数据库应用................................................................................................................................. 6
关系型中数据库切分存储 .................................................................................................................... 6
•
•
•
关系型中数据库 HA.................................................................................................................... 7
Redis 数据存储内容 ................................................................................................................... 8
Redis 的 HA............................................................................................................................... 8
2、Redis 内存数据库存放热点数据以及公共参数和映射参数 ................................................................... 8
3、Durid 检索聚合重点信息 ..................................................................................................................... 9
4、HBase 应用历史交易明细信息 ............................................................................................................. 9
5、MongoDB 应用用户的属性行为偏好信息 ......................................................................................... 10
•
•
数据存储和 HA ......................................................................................................................... 10
Hive 的 HA .............................................................................................................................. 12
6、HIVE 数据仓库 ................................................................................................................................... 11
四、实践应用架构................................................................................................................................................................................... 12
五、建设后小感 ....................................................................................................................................................................................... 13