您现在的位置是:首页 > 正文

spring boot 整合sharding jdbc 遇到的一些问题以及实例源码

2024-02-01 05:49:55阅读 2

一、整合

1.pom.xml 新增依赖(这里默认你项目中已经有了Mysql的依赖)
    <!-- sharding-jdbc分库分表插件 M2有bug -->
    <dependency>
      <groupId>io.shardingsphere</groupId>
      <artifactId>sharding-jdbc-spring-boot-starter</artifactId>
      <version>3.0.0.M3</version>
    </dependency>
    
    <dependency>
      <groupId>com.alibaba</groupId>
      <artifactId>druid</artifactId>
      <version>1.1.7</version>
    </dependency>
    
    <dependency>
      <groupId>io.shardingsphere</groupId>
      <artifactId>sharding-jdbc-spring-namespace</artifactId>
      <version>3.1.0.M1</version>
    </dependency>
2.配置

注意一下这里的版本是:3.0.0.M3 ,其他版本可能出现不可以使用 “_” 下划线定义逻辑表名报错的问题,推荐用 “-” 这种横线,到时候视情况修改即可

比如:ds_0 改成 ds-0

#这个很重要,可以解决低版本找不到数据源问题!!!
spring.main.allow-bean-definition-overriding=true
#显示sql
logging.level.com.bxl=DEBUG

mybatis.config-location=classpath:mybatis/mybatis-config.xml
mybatis.mapper-locations=classpath:mybatis/mapper/*.xml

## 数据源名称,多数据源以逗号分隔
sharding.jdbc.datasource.names=ds_0,ds_1

sharding.jdbc.datasource.ds_0.type=com.alibaba.druid.pool.DruidDataSource
sharding.jdbc.datasource.ds_0.driver-class-name=com.mysql.jdbc.Driver
sharding.jdbc.datasource.ds_0.url=jdbc:mysql://localhost:3306/ds_0?useUnicode=true&characterEncoding=utf-8&useSSL=false
sharding.jdbc.datasource.ds_0.username=root
sharding.jdbc.datasource.ds_0.password=root

sharding.jdbc.datasource.ds_1.type=com.alibaba.druid.pool.DruidDataSource
sharding.jdbc.datasource.ds_1.driver-class-name=com.mysql.jdbc.Driver
sharding.jdbc.datasource.ds_1.url=jdbc:mysql://localhost:3306/ds_1?useUnicode=true&characterEncoding=utf-8&useSSL=false
sharding.jdbc.datasource.ds_1.username=root
sharding.jdbc.datasource.ds_1.password=root

## 未配置分片规则的表将通过默认数据源定位
sharding.jdbc.config.sharding.default-data-source-name=ds_0
## 默认的分库策略:user_id为奇数-->数据库ds_1,user_id为偶数-->数据库ds_0
sharding.jdbc.config.sharding.default-database-strategy.inline.sharding-column=user_id
sharding.jdbc.config.sharding.default-database-strategy.inline.algorithm-expression=ds_$->{user_id % 2}

## 这里的t_order是逻辑表,由数据源名 + 表名组成,以小数点分隔。多个表以逗号分隔,支持inline表达式
sharding.jdbc.config.sharding.tables.t_order.actualDataNodes=ds_$->{0..1}.t_order_$->{0..1}
## 分片列名称
sharding.jdbc.config.sharding.tables.t_order.tableStrategy.inline.shardingColumn=order_id
## 分片算法行表达式,需符合groovy语法
sharding.jdbc.config.sharding.tables.t_order.tableStrategy.inline.algorithmExpression=t_order_$->{order_id % 2}
## 自增列名称,缺省表示不使用自增主键生成器
sharding.jdbc.config.sharding.tables.t_order.keyGeneratorColumnName=order_id
## 可自定义的列值生成器
#sharding.jdbc.config.sharding.tables.t_order.keyGeneratorClassName=com.bxl.demo.config.GeneratorOnleKey

## 绑定表规则列表
sharding.jdbc.config.sharding.binding-tables=t_order
## 广播表规则列表
#sharding.jdbc.config.sharding.broadcast-tables=t_config
## 开启sql打印
sharding.jdbc.config.props.sql.show=true
## 工作线程数量,默认值: CPU核数
sharding.jdbc.config.props.executor.size=4

!!!!高版本通用的配置,尽量避免使用“ _ ” 下划线定义逻辑库逻辑表时的报错问题:

#这个很重要,可以解决低版本找不到数据源问题!!!
spring.main.allow-bean-definition-overriding=true
#显示sql
logging.level.com.bxl=DEBUG

mybatis.config-location=classpath:mybatis/mybatis-config.xml
mybatis.mapper-locations=classpath:mybatis/mapper/*.xml

## 数据源名称,多数据源以逗号分隔
sharding.jdbc.datasource.names=ds-0,ds-1

sharding.jdbc.datasource.ds-0.type=com.alibaba.druid.pool.DruidDataSource
sharding.jdbc.datasource.ds-0.driver-class-name=com.mysql.jdbc.Driver
sharding.jdbc.datasource.ds-0.url=jdbc:mysql://localhost:3306/ds_0?useUnicode=true&characterEncoding=utf-8&useSSL=false
sharding.jdbc.datasource.ds-0.username=root
sharding.jdbc.datasource.ds-0.password=root

sharding.jdbc.datasource.ds-1.type=com.alibaba.druid.pool.DruidDataSource
sharding.jdbc.datasource.ds-1.driver-class-name=com.mysql.jdbc.Driver
sharding.jdbc.datasource.ds-1.url=jdbc:mysql://localhost:3306/ds_1?useUnicode=true&characterEncoding=utf-8&useSSL=false
sharding.jdbc.datasource.ds-1.username=root
sharding.jdbc.datasource.ds-1.password=root

## 未配置分片规则的表将通过默认数据源定位
sharding.jdbc.config.sharding.default-data-source-name=ds-0
## 默认的分库策略:user_id为奇数-->数据库ds-1,user_id为偶数-->数据库ds-0
sharding.jdbc.config.sharding.default-database-strategy.inline.sharding-column=user_id
sharding.jdbc.config.sharding.default-database-strategy.inline.algorithm-expression=ds-$->{user_id % 2}

## 这里的t_order是逻辑表,由数据源名 + 表名组成,以小数点分隔。多个表以逗号分隔,支持inline表达式
sharding.jdbc.config.sharding.tables.t_order.actualDataNodes=ds-$->{0..1}.t_order_$->{0..1}
## 分片列名称
sharding.jdbc.config.sharding.tables.t_order.tableStrategy.inline.shardingColumn=order_id
## 分片算法行表达式,需符合groovy语法
sharding.jdbc.config.sharding.tables.t_order.tableStrategy.inline.algorithmExpression=t_order_$->{order_id % 2}
## 自增列名称,缺省表示不使用自增主键生成器
sharding.jdbc.config.sharding.tables.t_order.keyGeneratorColumnName=order_id
## 可自定义的列值生成器
#sharding.jdbc.config.sharding.tables.t_order.keyGeneratorClassName=com.bxl.demo.config.GeneratorOnleKey

## 绑定表规则列表
sharding.jdbc.config.sharding.binding-tables=t_order
## 广播表规则列表
#sharding.jdbc.config.sharding.broadcast-tables=t_config
## 开启sql打印
sharding.jdbc.config.props.sql.show=true
## 工作线程数量,默认值: CPU核数
sharding.jdbc.config.props.executor.size=4

具体里面的配置各个什么意思,可以看下注释,注释不明白的推荐去官网查看相关的配置,可以当手册使用:https://shardingsphere.apache.org/document/legacy/3.x/document/cn/manual/

3.遇到的问题“The bean ‘dataSource’, defined in class path resource …”

具体遇到的错误:

The bean 'dataSource', defined in class path resource [io/shardingsphere/shardingjdbc/spring/boot/SpringBootConfiguration.class], could not be registered. A bean with that name has already been defined in class path resource [org/springframework/boot/autoconfigure/jdbc/DataSourceConfiguration$Hikari.class] and overriding is disabled.

Action:

Consider renaming one of the beans or enabling overriding by setting spring.main.allow-bean-definition-overriding=true

解决问题的关键:
这个是针对高版本的,反正我使用3.0.0的时候没这个问题。

spring.main.allow-bean-definition-overriding=true

如果不行再试试这个:
启动类上的注解排除一下试试(貌似没啥用)

@SpringBootApplication(exclude = {org.springframework.boot.autoconfigure.jdbc.DataSourceConfiguration.class})
4.实际案例

先来看一下我的表结构
在这里插入图片描述
一个实例里面有两个库:db_0 、db_1 , 每个里面有两个表:t_order_0 , t_order_1
代码我就不粘贴了,没什么而可说的,跟咱们平时CURD一样的。 其实重要的就是配置文件。
我把demo放在这里供大家测试:
https://download.csdn.net/download/YL3126/33825270

网站文章

  • mysqld_safe Directory &#39;/var/lib/mysql&#39; for UNIX socket file don&#39;t exists

    原因:mysql找不着socket文件。 解决办法: 1、修改mysql配置文件my.cnf中[mysqld]下的socket配置项。效果如下。 [mysqld] socket = /tmp/mysql.sock 2、终极解决办法:重启服务器。 ...

    2024-02-01 05:49:47
  • 洛谷 P1618

    https://www.luogu.org/problemnew/show/P1618 题目描述 将1,2,…,9共9个数分成三组,分别组成三个三位数,且使这三个三位数的比例是A:B:C,试求出所有满足条件的三个三位数,若无解,输出“No!!!”。 //感谢黄小U饮品完善题意 输入输出格式 输入格式: 三个数,A B C。 输出格式: 若干行,每行3个数字。按照每...

    2024-02-01 05:49:41
  • 设计模式之责任链模式

    设计模式之责任链模式

    不同级别的权限检查由不同的权限处理者来执行,如果某个处理者无法处理权限请求,则请求将被传递给下一个处理者。让我们想象一个问题解决系统,根据问题的复杂程度,系统中的不同专家级别的工程师会负责处理不同级别...

    2024-02-01 05:49:13
  • 浅谈MIL、SIL、PIL、HIL

    浅谈MIL、SIL、PIL、HIL

    MBD开过过程中,经常会接触到MIL、SIL、PIL、HIL,下文将从定义着手,将他们区别开来。 定义: MIL:Model in loop, 验证控制算法模型是否满足功能需求 SIL: Software in loop, 在PC上验证模型是否与代码功能一致 PIL:Processor in loop, 在目标处理器上验证模型是否与代码功能一致 HIL:Hardw

    2024-02-01 05:49:07
  • Python(三)微信公众号开发

    Python(三)微信公众号开发

    ps:暂未完善,先做记录。本文核心讲外网穿透及微信Token验证 阅读 基本开发流程 申请个人公众号-订阅号 微信公众平台https://mp.weixin.qq.com 自定义菜单 微信公众平台当然...

    2024-02-01 05:49:01
  • 数据结构 | 交换排序

    数据结构 | 交换排序

    交换排序(包括冒泡排序、快速排序)的C语言实现

    2024-02-01 05:48:32
  • stanford corenlp命名实体识别(基于python)

    stanford corenlp命名实体识别(基于python)

    很多童鞋在用stanford-core-nlp进行命名实体识别时遇到了各种问题,在此本人根据已有经验讲述如何成功利用stanford工具进行命名实体识别处理。 1. 环境安装 需要用到的有java_j...

    2024-02-01 05:48:27
  • Count and Say --leetcode

    Count and Say --leetcode题目如下The count-and-say sequence is the sequence of integers beginning as follows:1, 11, 21, 1211, 111221, ...1 is read off as "one 1" or 11.11 is rea

    2024-02-01 05:48:19
  • paddle-serving docker部署,dockerfile一键打镜像,一键启动容器

    一、服务端dockfile编写 节省镜像空间,此处在python的镜像基础上构建,最终镜像2.38G FROM python:3.7.4 COPY . /deploy WORKDIR /deploy ...

    2024-02-01 05:48:13
  • 2D空间求一点是否在多边形内

    2D空间求一点是否在多边形内

    转自:https://www.cnblogs.com/hont/p/6105997.html大致流程:1.随便选取多边形上任意一条边,以比较点和边的中心点做一条射线(这里用的伪射线)。2.用这条射线与...

    2024-02-01 05:47:43