分庫分表(7)--- SpringBoot+ShardingSphere實現分庫分表 + 讀寫分離
分庫分表(7)--- ShardingSphere實現分庫分表+讀寫分離
有關分庫分表前面寫了六篇部落格:
1、分庫分表(1) --- 理論
2、分庫分表(2) --- ShardingSphere(理論)
3、分庫分表(3) ---SpringBoot + ShardingSphere實現讀寫分離
4、分庫分表(4) ---SpringBoot + ShardingSphere 實現分表
5、分庫分表(5) ---SpringBoot + ShardingSphere 實現分庫分表
6、分庫分表(6)--- SpringBoot+ShardingSphere實現分表+ 讀寫分離
這篇部落格通過ShardingSphere實現分庫分表 + 讀寫分離
Github地址
。
一、專案概述
1、技術架構
專案總體技術選型
SpringBoot2.0.6 + shardingsphere4.0.0-RC1 + Maven3.5.4 + MySQL + lombok(外掛)
2、專案說明
場景
在實際開發中,如果資料庫壓力大我們可以通過 分庫分表 的基礎上進行 讀寫分離,來減緩資料庫壓力。
3、資料庫設計
分庫
ms單庫分庫分為 ms0庫 和 ms1庫。
分表
tab_user單表分為tab_user0表 和 tab_user1表。
讀寫分離
資料寫入ms0庫 和 ms1庫,資料讀取 sl0庫 和 sl1庫。
如圖
ms0 ---主庫
ms1 ---主庫
sl0 ---從庫
sl1 ---從庫
說明
初始資料的時候,這邊只有 sl0從庫 我插入了一條資料。那是因為我們這個專案中Mysql伺服器並沒有實現主從部署,這四個庫都在同一伺服器上,所以
做不到主資料庫資料自動同步到從資料庫。所以這裡在從資料庫建一條資料。等下驗證的時候,我們只需驗證資料是否存入ms0
和ms1
,資料讀取是否在sl0
和sl1
。
具體的建立表SQL也會放到GitHub專案裡
二、核心程式碼
說明
完整的程式碼會放到GitHub上,這裡只放一些核心程式碼。
1、application.properties
server.port=8082 #指定mybatis資訊 mybatis.config-location=classpath:mybatis-config.xml #列印sql spring.shardingsphere.props.sql.show=true #資料來源 spring.shardingsphere.datasource.names=master0,slave0,master1,slave1 spring.shardingsphere.datasource.master0.type=com.alibaba.druid.pool.DruidDataSource spring.shardingsphere.datasource.master0.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.master0.url=jdbc:mysql://localhost:3306/ms0?characterEncoding=utf-8 spring.shardingsphere.datasource.master0.username=root spring.shardingsphere.datasource.master0.password=root spring.shardingsphere.datasource.slave0.type=com.alibaba.druid.pool.DruidDataSource spring.shardingsphere.datasource.slave0.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.slave0.url=jdbc:mysql://localhost:3306/sl0?characterEncoding=utf-8 spring.shardingsphere.datasource.slave0.username=root spring.shardingsphere.datasource.slave0.password=root spring.shardingsphere.datasource.master1.type=com.alibaba.druid.pool.DruidDataSource spring.shardingsphere.datasource.master1.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.master1.url=jdbc:mysql://localhost:3306/ms1?characterEncoding=utf-8 spring.shardingsphere.datasource.master1.username=root spring.shardingsphere.datasource.master1.password=root spring.shardingsphere.datasource.slave1.type=com.alibaba.druid.pool.DruidDataSource spring.shardingsphere.datasource.slave1.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.slave1.url=jdbc:mysql://localhost:3306/slave1?characterEncoding=utf-8 spring.shardingsphere.datasource.slave1.username=root spring.shardingsphere.datasource.slave1.password=root #根據年齡分庫 spring.shardingsphere.sharding.default-database-strategy.inline.sharding-column=age spring.shardingsphere.sharding.default-database-strategy.inline.algorithm-expression=master$->{age % 2} #根據id分表 spring.shardingsphere.sharding.tables.tab_user.actual-data-nodes=master$->{0..1}.tab_user$->{0..1} spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.sharding-column=id spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.algorithm-expression=tab_user$->{id % 2} #指定master0為主庫,slave0為它的從庫 spring.shardingsphere.sharding.master-slave-rules.master0.master-data-source-name=master0 spring.shardingsphere.sharding.master-slave-rules.master0.slave-data-source-names=slave0 #指定master1為主庫,slave1為它的從庫 spring.shardingsphere.sharding.master-slave-rules.master1.master-data-source-name=master1 spring.shardingsphere.sharding.master-slave-rules.master1.slave-data-source-names=slave1
Sharding-JDBC可以通過Java
,YAML
,Spring名稱空間
和Spring Boot Starter
四種方式配置,開發者可根據場景選擇適合的配置方式。具體可以看官網。
2、UserController
@RestController
public class UserController {
@Autowired
private UserService userService;
/**
* 模擬插入資料
*/
List<User> userList = Lists.newArrayList();
/**
* 初始化插入資料
*/
@PostConstruct
private void getData() {
userList.add(new User(1L,"小小", "女", 3));
userList.add(new User(2L,"爸爸", "男", 30));
userList.add(new User(3L,"媽媽", "女", 28));
userList.add(new User(4L,"爺爺", "男", 64));
userList.add(new User(5L,"奶奶", "女", 62));
}
/**
* @Description: 批量儲存使用者
*/
@PostMapping("save-user")
public Object saveUser() {
return userService.insertForeach(userList);
}
/**
* @Description: 獲取使用者列表
*/
@GetMapping("list-user")
public Object listUser() {
return userService.list();
}
三、測試驗證
1、批量插入資料
請求介面
localhost:8082/save-user
我們可以從商品介面程式碼中可以看出,它會批量插入5條資料。我們先看控制檯輸出SQL語句
我們可以從SQL語句可以看出 master0 和 master1 庫中都插入了資料。
我們再來看資料庫
ms0.tab_user0
ms0.tab_user1
ms1.tab_user0
ms1.tab_user1
完成分庫分表插入資料。
2、獲取資料
這裡獲取列表介面的SQL。
select * from tab_user
請求介面結果
結論
從介面返回的結果可以很明顯的看出,資料儲存在主庫,而資料庫的讀取在從庫。
注意
ShardingSphere並不支援CASE WHEN
、HAVING
、UNION (ALL)
,有限支援子查詢
。這個官網有詳細說明。
Github地址
:https://github.com/yudiandemingzi/spring-boot-sharding-sphere
參考
1、ShardingSphere中文文件
2、ShardingSphere官網
3、Shardingsphere Github庫
我相信,無論今後的道路多麼坎坷,只要抓住今天,遲早會在奮鬥中嚐到人生的甘甜。抓住人生中的一分一秒,勝過虛度中的一月一年!(20)
<