分庫分表(5) —SpringBoot + ShardingSphere 實現分庫分表

  • 2019 年 10 月 14 日
  • 筆記

分庫分表(5)— ShardingSphere實現分庫分表

有關分庫分表前面寫了四篇部落格:

1、分庫分表(1) — 理論

2、分庫分表(2) — ShardingSphere(理論)

3、分庫分表(3) —SpringBoot + ShardingSphere實現讀寫分離

4、分庫分表(4) —SpringBoot + ShardingSphere 實現分表

這篇部落格通過ShardingSphere實現分庫分表,並在文章最下方附上項目Github地址

一、項目概述

1、技術架構

項目總體技術選型

SpringBoot2.0.6 + shardingsphere4.0.0-RC1 + Maven3.5.4  + MySQL + lombok(插件)

2、項目說明

場景 在實際開發中,如果表的數據過大我們需要把一張表拆分成多張表,也可以垂直切分把一個庫拆分成多個庫,這裡就是通過ShardingSphere實現分庫分表功能。

3、資料庫設計

這裡有個設計了兩個庫 ds0ds1,每個庫中有兩個表tab_user0tab_user1

如圖

ds0庫

ds1庫

具體的創建表SQL也會放到GitHub項目里

二、核心程式碼

說明 完整的程式碼會放到GitHub上,這裡只放一些核心程式碼。

1、application.properties

server.port=8084    #指定mybatis資訊  mybatis.config-location=classpath:mybatis-config.xml  #列印sql  spring.shardingsphere.props.sql.show=true    spring.shardingsphere.datasource.names=ds0,ds1    spring.shardingsphere.datasource.ds0.type=com.alibaba.druid.pool.DruidDataSource  spring.shardingsphere.datasource.ds0.driver-class-name=com.mysql.jdbc.Driver  spring.shardingsphere.datasource.ds0.url=jdbc:mysql://47.99.203.55:3306/ds0?characterEncoding=utf-8  spring.shardingsphere.datasource.ds0.username=root  spring.shardingsphere.datasource.ds0.password=123456    spring.shardingsphere.datasource.ds1.type=com.alibaba.druid.pool.DruidDataSource  spring.shardingsphere.datasource.ds1.driver-class-name=com.mysql.jdbc.Driver  spring.shardingsphere.datasource.ds1.url=jdbc:mysql://47.99.203.55:3306/ds1?characterEncoding=utf-8  spring.shardingsphere.datasource.ds1.username=root  spring.shardingsphere.datasource.ds1.password=123456    #根據年齡分庫  spring.shardingsphere.sharding.default-database-strategy.inline.sharding-column=age  spring.shardingsphere.sharding.default-database-strategy.inline.algorithm-expression=ds$->{age % 2}  #根據id分表  spring.shardingsphere.sharding.tables.tab_user.actual-data-nodes=ds$->{0..1}.tab_user$->{0..1}  spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.sharding-column=id  spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.algorithm-expression=tab_user$->{id % 2}

Sharding-JDBC可以通過JavaYAMLSpring命名空間Spring Boot Starter四種方式配置,開發者可根據場景選擇適合的配置方式。具體可以看官網。

2、UserController

@RestController  public class UserController {        @Autowired      private UserService userService;        /**       * 模擬插入數據       */      List<User> userList = Lists.newArrayList();      /**       * 初始化插入數據       */      @PostConstruct      private void getData() {          userList.add(new User(1L,"小小", "女", 3));          userList.add(new User(2L,"爸爸", "男", 30));          userList.add(new User(3L,"媽媽", "女", 28));          userList.add(new User(4L,"爺爺", "男", 64));          userList.add(new User(5L,"奶奶", "女", 62));      }      /**       * @Description: 批量保存用戶       */      @PostMapping("save-user")      public Object saveUser() {          return userService.insertForeach(userList);      }      /**       * @Description: 獲取用戶列表       */      @GetMapping("list-user")      public Object listUser() {          return userService.list();      }

三、測試驗證

1、批量插入數據

請求介面

localhost:8084/save-user

我們可以從商品介面程式碼中可以看出,它會批量插入5條數據。我們先看控制台輸出SQL語句

我們可以從SQL語句可以看出 ds0ds1 庫中都插入了數據。

我們再來看資料庫

ds0.tab_user0

ds0.tab_user1

ds1.tab_user0

ds1.tab_user1

完成分庫分表插入數據。

2、獲取數據

這裡獲取列表介面的SQL,這裡對SQL做了order排序操作,具體ShardingSphere分表實現order操作的原理可以看上面一篇部落格。

  select *  from tab_user order by age  <!--根據年齡排序-->

請求介面結果

我們可以看出雖然已經分庫分表,但依然可以將多表數據聚合在一起並可以支援按age排序

注意 ShardingSphere並不支援CASE WHENHAVINGUNION (ALL)有限支援子查詢。這個官網有詳細說明。

Github地址https://github.com/yudiandemingzi/spring-boot-sharding-sphere

參考

1、ShardingSphere中文文檔

2、ShardingSphere官網

3、Shardingsphere Github庫

 我相信,無論今後的道路多麼坎坷,只要抓住今天,遲早會在奮鬥中嘗到人生的甘甜。抓住人生中的一分一秒,勝過虛度中的一月一年!(20)