分库分表(5) —SpringBoot + ShardingSphere 实现分库分表

• 2019 年 10 月 14 日
• 筆記

分库分表(5)— ShardingSphere实现分库分表

有关分库分表前面写了四篇博客:

1、分库分表(1) — 理论

2、分库分表(2) — ShardingSphere(理论)

3、分库分表(3) —SpringBoot + ShardingSphere实现读写分离

4、分库分表(4) —SpringBoot + ShardingSphere 实现分表

这篇博客通过ShardingSphere实现分库分表，并在文章最下方附上项目Github地址。

一、项目概述

1、技术架构

项目总体技术选型

SpringBoot2.0.6 + shardingsphere4.0.0-RC1 + Maven3.5.4  + MySQL + lombok(插件)

2、项目说明

场景 在实际开发中，如果表的数据过大我们需要把一张表拆分成多张表，也可以垂直切分把一个库拆分成多个库，这里就是通过ShardingSphere实现分库分表功能。

3、数据库设计

这里有个设计了两个库 ds0 和 ds1，每个库中有两个表tab_user0 和 tab_user1。

如图

ds0库

ds1库

具体的创建表SQL也会放到GitHub项目里

二、核心代码

说明 完整的代码会放到GitHub上，这里只放一些核心代码。

1、application.properties

server.port=8084    #指定mybatis信息  mybatis.config-location=classpath:mybatis-config.xml  #打印sql  spring.shardingsphere.props.sql.show=true    spring.shardingsphere.datasource.names=ds0,ds1    spring.shardingsphere.datasource.ds0.type=com.alibaba.druid.pool.DruidDataSource  spring.shardingsphere.datasource.ds0.driver-class-name=com.mysql.jdbc.Driver  spring.shardingsphere.datasource.ds0.url=jdbc:mysql://47.99.203.55:3306/ds0?characterEncoding=utf-8  spring.shardingsphere.datasource.ds0.username=root  spring.shardingsphere.datasource.ds0.password=123456    spring.shardingsphere.datasource.ds1.type=com.alibaba.druid.pool.DruidDataSource  spring.shardingsphere.datasource.ds1.driver-class-name=com.mysql.jdbc.Driver  spring.shardingsphere.datasource.ds1.url=jdbc:mysql://47.99.203.55:3306/ds1?characterEncoding=utf-8  spring.shardingsphere.datasource.ds1.username=root  spring.shardingsphere.datasource.ds1.password=123456    #根据年龄分库  spring.shardingsphere.sharding.default-database-strategy.inline.sharding-column=age  spring.shardingsphere.sharding.default-database-strategy.inline.algorithm-expression=ds$->{age % 2}  #根据id分表  spring.shardingsphere.sharding.tables.tab_user.actual-data-nodes=ds$->{0..1}.tab_user$->{0..1}  spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.sharding-column=id  spring.shardingsphere.sharding.tables.tab_user.table-strategy.inline.algorithm-expression=tab_user$->{id % 2}

Sharding-JDBC可以通过Java，YAML，Spring命名空间和Spring Boot Starter四种方式配置，开发者可根据场景选择适合的配置方式。具体可以看官网。

2、UserController

@RestController  public class UserController {        @Autowired      private UserService userService;        /**       * 模拟插入数据       */      List<User> userList = Lists.newArrayList();      /**       * 初始化插入数据       */      @PostConstruct      private void getData() {          userList.add(new User(1L,"小小", "女", 3));          userList.add(new User(2L,"爸爸", "男", 30));          userList.add(new User(3L,"妈妈", "女", 28));          userList.add(new User(4L,"爷爷", "男", 64));          userList.add(new User(5L,"奶奶", "女", 62));      }      /**       * @Description: 批量保存用户       */      @PostMapping("save-user")      public Object saveUser() {          return userService.insertForeach(userList);      }      /**       * @Description: 获取用户列表       */      @GetMapping("list-user")      public Object listUser() {          return userService.list();      }

三、测试验证

1、批量插入数据

请求接口

localhost:8084/save-user

我们可以从商品接口代码中可以看出，它会批量插入5条数据。我们先看控制台输出SQL语句

我们可以从SQL语句可以看出 ds0 和 ds1 库中都插入了数据。

我们再来看数据库

ds0.tab_user0

ds0.tab_user1

ds1.tab_user0

ds1.tab_user1

完成分库分表插入数据。

2、获取数据

这里获取列表接口的SQL，这里对SQL做了order排序操作，具体ShardingSphere分表实现order操作的原理可以看上面一篇博客。

  select *  from tab_user order by age  <!--根据年龄排序-->

请求接口结果

我们可以看出虽然已经分库分表，但依然可以将多表数据聚合在一起并可以支持按age排序。

注意 ShardingSphere并不支持CASE WHEN、HAVING、UNION (ALL)，有限支持子查询。这个官网有详细说明。

Github地址：https://github.com/yudiandemingzi/spring-boot-sharding-sphere

参考

1、ShardingSphere中文文档

2、ShardingSphere官网

3、Shardingsphere Github库

 我相信，无论今后的道路多么坎坷，只要抓住今天，迟早会在奋斗中尝到人生的甘甜。抓住人生中的一分一秒，胜过虚度中的一月一年！(20）