ShardingSphere分库分表中文使用手册_sharding-jdbcsharding-proxy如何选择资源-CSDN文库

ShardingSphere

Sharding-jdbc

5星 · 超过95%的资源需积分: 36 183 浏览量 2020-11-26 08:31:04 上传评论 1 收藏 6.15MB PDF 举报

资源详情

资源评论

Apache ShardingSphere ElasticJob

document

Apache ShardingSphere

2020 年 11 ⽉ 25 ⽇

Contents

1 简介 2

1.1 ShardingSphere-JDBC . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2

1.2 ShardingSphere-Proxy . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2

1.3 ShardingSphere-Sidecar（TODO） . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 2

1.4 混合架构 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 5

2 功能列表 6

2.1 数据分⽚ . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 6

2.2 分布式事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 6

2.3 数据库治理 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 6

3 快速⼊⻔ 7

3.1 ShardingSphere-JDBC . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7

3.1.1 1. 引⼊ maven 依赖 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7

3.1.2 2. 规则配置 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7

3.1.3 3. 创建数据源 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 7

3.2 ShardingSphere-Proxy . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8

3.2.1 1. 规则配置 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8

3.2.2 2. 引⼊依赖 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8

3.2.3 3. 启动服务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8

3.2.4 4. 使⽤ ShardingSphere-Proxy . . . . . . . . . . . . . . . . . . . . . . . . . . . 8

3.3 ShardingSphere-Scaling(Alpha) . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8

3.3.1 1. 规则配置 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 8

3.3.2 2. 引⼊依赖 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9

3.3.3 3. 启动服务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9

3.3.4 4. 任务管理 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 9

4 概念 & 功能 10

4.1 数据分⽚ . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 10

4.1.1 背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 10

垂直分⽚ . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11

⽔平分⽚ . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 11

4.1.2 挑战 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 12

4.1.3 ⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13

4.1.4 核⼼概念 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13

导览 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13

SQL . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 13

分⽚ . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 14

配置 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 16

⾏表达式 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 17

分布式主键 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 20

强制分⽚路由 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 22

4.1.5 内核剖析 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 22

SQL 解析 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24

执⾏器优化 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24

SQL 路由 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24

SQL 改写 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24

SQL 执⾏ . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24

结果归并 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24

解析引擎 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 24

路由引擎 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 27

改写引擎 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 30

执⾏引擎 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 39

归并引擎 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 44

4.1.6 使⽤规范 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 48

背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 48

SQL . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 49

分⻚ . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 52

解析器 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 53

RDL . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 54

4.2 分布式事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 57

4.2.1 背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 57

本地事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 57

两阶段提交 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 57

柔性事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 58

4.2.2 挑战 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 58

4.2.3 ⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 58

4.2.4 核⼼概念 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 59

导览 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 59

XA 两阶段事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 59

Seata 柔性事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 60

4.2.5 实现原理 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 61

导览 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 61

XA 两阶段事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 61

Seata 柔性事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 62

4.2.6 使⽤规范 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 64

背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 64

本地事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 64

XA 两阶段事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 64

Seata 柔性事务 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 65

4.3 读写分离 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 65

4.3.1 背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 65

4.3.2 挑战 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 65

4.3.3 ⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67

4.3.4 核⼼概念 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67

主库 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67

从库 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67

主从同步 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67

负载均衡策略 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67

4.3.5 使⽤规范 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67

⽀持项 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67

不⽀持项 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 67

4.4 分布式治理 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 68

4.4.1 背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 68

4.4.2 挑战 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 68

4.4.3 ⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 68

4.4.4 治理 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 69

导览 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 69

配置中⼼ . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 69

注册中⼼ . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 72

第三⽅组件依赖 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 73

4.4.5 可观察性 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 74

导览 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 74

应⽤性能监控集成 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 74

4.5 弹性伸缩 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 78

4.5.1 背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 78

4.5.2 简介 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 78

4.5.3 挑战 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 79

4.5.4 ⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 79

4.5.5 状态 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 79

4.5.6 核⼼概念 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 79

弹性伸缩作业 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 79

数据节点 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 80

存量数据 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 80

增量数据 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 80

4.5.7 实现原理 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 80

原理说明 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 80

执⾏阶段说明 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 81

4.5.8 使⽤规范 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 82

⽀持项 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 82

不⽀持项 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 82

4.6 数据加密 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 82

iii

4.6.1 背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 82

4.6.2 挑战 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 83

4.6.3 ⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 83

4.6.4 核⼼概念 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 83

4.6.5 实现原理 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 83

处理流程详解 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 83

解决⽅案详解 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 87

中间件加密服务优势 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 91

加密算法解析 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 92

4.6.6 使⽤规范 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 93

⽀持项 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 93

不⽀持项 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 93

4.7 影⼦库压测 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 93

4.7.1 背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 93

4.7.2 挑战 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 93

4.7.3 ⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94

4.7.4 核⼼概念 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94

影⼦字段 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94

⽣产数据库 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94

影⼦数据库 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94

4.7.5 实现原理 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94

整体架构 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94

影⼦规则 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94

处理过程 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 94

4.8 可插拔架构 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 97

4.8.1 背景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 97

4.8.2 挑战 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 97

4.8.3 ⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 97

4.9 测试引擎 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 97

4.9.1 SQL 测试⽤例 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 98

⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 98

4.9.2 整合测试引擎 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 98

流程 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 98

注意事项 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 103

4.9.3 SQL 解析测试引擎 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 103

数据准备 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 103

4.9.4 SQL 改写测试引擎 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 104

⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 104

4.9.5 性能测试 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 106

⽬标 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 106

测试场景 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 106

测试环境搭建 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 107

测试结果验证 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . 113

5 ⽤⼾⼿册 115

剩余214页未读，继续阅读

评论收藏

内容反馈

萱呀

2023-07-25

使用手册的语言通俗易懂，对于没有太多技术背景的人来说也能轻松上手。

ShardingSphere分库分表中文使用手册

评论5

最新资源

ShardingSphere分库分表中文使用手册

评论5

最新资源

相关推荐

SpringBoot + ShardingSphere分库分表实战(附完整代码)

分库分表中文手册-shardingsphere.pdf

Apache ShardingSphere 中文文档 分库分表

shardingsphere 整合 达梦数据库 实现分表分库 (包含test demo)

sharding分库分表demo

sharding-jdbc 3.1.0 不分片表,分页bug,第二页查出的数据会显示前面的数据

sharding-jdbc按月分表样例

当当网 高洪涛 Sharding-JDBC PPT分享

shardingsphere-sharding-proxy-4.0.0-RC1

ShardingSphere:SpringBoot2+MybatisPlus+读写分离+分库分表

ShardingSphere:SpringBoot2+MybatisPlus+Swagge分库分表

spring-boot-sharding-sphere:SpringBoot + ShardingSphere 实现读写分离 分库分表

深入剖析ShardingSphere：探索其内核原理与核心源码，揭秘分库分表技术的奥秘

mysql3库3表分库分表解决方案之 Apache ShardingSphere.zip

shardingsphere-jdbc实现简单的单库分表

shardingsphere_docs_cn.pdf

Sharding JDBC PPT 分享

jdbc课件以及源代码（数据源）

sharding-jdbc之——分库分表实例完整源码

SpringBoot整合Sharding-JDBC，实现从数据库加载sharding-jdbc数据源，实现多种数据库数据源切换，数据库方言动态切换

Sharding JDBC.xmind

ShardingSphere:SpringBoot2+MybatisPlus3+UI不分库只分表

Springboot2.x+ShardingSphere实现分库分表的示例代码

分库分表中间件MyCat使用手册

分库分表，多数据源的切换

Apache ShardingSphere 中文文档分库分表

shardingsphere 整合达梦数据库实现分表分库 (包含test demo)

当当网高洪涛 Sharding-JDBC PPT分享

spring-boot-sharding-sphere:SpringBoot + ShardingSphere 实现读写分离分库分表