苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

yizhihongxing

开心一刻

  2023年元旦,我妈又开始了对我的念叨

  妈:你到底想多少岁结婚

  我:60

  妈:60,你想找个多大的

  我:找个55的啊,她55我60,结婚都有退休金,不用上班不用生孩子,不用买车买房,成天就是玩儿

  我:而且一结婚就是白头偕老,多好

  我妈直接一大嘴巴子呼我脸上

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

需求背景

  最近接到一个需求,需要从两个数据源获取数据,然后进行汇总展示

  一个数据源是 MySQL ,另一个数据源是 SQL Server 

  楼主是一点都不慌的,因为我写过好几篇关于数据源的文章

    spring集成mybatis实现mysql读写分离

    原理解密 → Spring AOP 实现动态数据源(读写分离),底层原理是什么

    Spring 下,关于动态数据源的事务问题的探讨

  我会慌?

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  但还是有点小拒绝,为什么了?

  自己实现的话,要写的东西还是很多,要写 AOP ,还要实现 AbstractRoutingDataSource ,还要用到 ThreadLocal ,...

  如果考虑更远一些,事务、数据源之间的嵌套等等,要如何保证正确?

  但好在这次需求只是查询,然后汇总,问题就简单很多了,但还是觉得有点小繁琐

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  当然,如上只是楼主的臆想

  有小伙伴可能会问道:能不能合到一个数据源?

  楼主只能说:别问了,再问就不礼貌了

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  既然改变不了,那就盘它

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  难道就没有现成的多数据源工具?

  因为用到了 Mybatis-Plus ,楼主试着 Google 了一下

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  直接一发入魂,眼前一黑,不对,是眼前一亮!

  感觉就是它了!

MyBatis-Plus 多数据源

  关于苞米豆(baomidou),我们最熟悉的肯定是 MyBatis-Plus 

  但旗下还有很多其他优秀的组件

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  多数据源就是其中一个,今天我们就来会会它

  数据源准备

  用 docker 准备一个 MySQL 和 SQL Server ,图省事,两个数据库服务器放到同个 docker 下了

  有小伙伴会觉得放一起不合适,有单点问题!

  楼主只是为了演示,纠结那么细,当心敲你狗头

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

   MySQL 版本: 8.0.27 

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  建库: datasource_mysql ,建表: tbl_user ,并插入初始化数据

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

CREATE DATABASE datasource_mysql;
USE datasource_mysql;
CREATE TABLE tbl_user (
    id INT UNSIGNED NOT NULL AUTO_INCREMENT,
    user_name VARCHAR(50),
    PRIMARY KEY(id)
);
INSERT INTO tbl_user(user_name) VALUES('张三'),('李四');

View Code

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

   SQL Server 版本: Microsoft SQL Server 2017 ... ,是真长,跟楼主一样长!

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  建库: datasource_mssql ,建表: tbl_order ,并插入初始化数据

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

CREATE DATABASE datasource_mssql;
USE datasource_mssql;
CREATE TABLE tbl_order(
    id BIGINT PRIMARY KEY IDENTITY(1,1),
    order_no NVARCHAR(50),
    created_at DATETIME NOT NULL DEFAULT(GETDATE()),
    updated_at DATETIME NOT NULL DEFAULT(GETDATE())
);
INSERT INTO tbl_order(order_no) VALUES('123456'),('654321');

View Code

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  dynamic-datasource 使用

  基于 spring-boot 2.2.10.RELEASE 、 mybatis-plus 3.1.1 搭建

   dynamic-datasource-spring-boot-starter 也是 3.1.1 

  依赖很简单, pom.xml 

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

<?xml version="1.0" encoding="UTF-8"?>
<project xmlns="http://maven.apache.org/POM/4.0.0"
         xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
         xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd">
    <modelVersion>4.0.0</modelVersion>

    <groupId>com.lee</groupId>
    <artifactId>mybatis-plus-dynamic-datasource</artifactId>
    <version>1.0-SNAPSHOT</version>

    <parent>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-parent</artifactId>
        <version>2.2.10.RELEASE</version>
    </parent>

    <properties>
        <java.version>1.8</java.version>
        <maven.compiler.source>8</maven.compiler.source>
        <maven.compiler.target>8</maven.compiler.target>
        <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
        <project.reporting.outputEncoding>UTF-8</project.reporting.outputEncoding>
        <mybatis-plus-boot-starter.version>3.1.1</mybatis-plus-boot-starter.version>
        <mssql-jdbc.version>6.2.1.jre8</mssql-jdbc.version>
    </properties>

    <dependencies>
        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-web</artifactId>
        </dependency>
        <dependency>
            <groupId>org.projectlombok</groupId>
            <artifactId>lombok</artifactId>
        </dependency>
        <dependency>
            <groupId>com.baomidou</groupId>
            <artifactId>mybatis-plus-boot-starter</artifactId>
            <version>${mybatis-plus-boot-starter.version}</version>
        </dependency>
        <dependency>
            <groupId>com.baomidou</groupId>
            <artifactId>dynamic-datasource-spring-boot-starter</artifactId>
            <version>${mybatis-plus-boot-starter.version}</version>
        </dependency>
        <!-- MySQL驱动-->
        <dependency>
            <groupId>mysql</groupId>
            <artifactId>mysql-connector-java</artifactId>
        </dependency>

        <!-- SQL Server 驱动-->
        <dependency>
            <groupId>com.microsoft.sqlserver</groupId>
            <artifactId>mssql-jdbc</artifactId>
            <version>${mssql-jdbc.version}</version>
        </dependency>
    </dependencies>
</project>

View Code

  配置也很简单, application.yml 

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

server:
  port: 8081
spring:
  application:
    name: dynamic-datasource
  datasource:
    dynamic:
      datasource:
        mssql_db:
          driver-class-name: com.microsoft.sqlserver.jdbc.SQLServerDriver
          url: jdbc:sqlserver://10.5.108.225:1433;DatabaseName=datasource_mssql;IntegratedSecurity=false;ApplicationIntent=ReadOnly;MultiSubnetFailover=True
          username: sa
          password: Root#123456
        mysql_db:
          driver-class-name: com.mysql.cj.jdbc.Driver
          url: jdbc:mysql://10.5.108.225:3306/datasource_mysql?useSSL=false&useUnicode=true&characterEncoding=utf-8&useJDBCCompliantTimezoneShift=true&useLegacyDatetimeCode=false&serverTimezone=Asia/Shanghai
          username: root
          password: 123456
      primary: mssql_db
      strict: false

mybatis-plus:
  mapper-locations: classpath:mappers/*.xml
  configuration:
    log-impl: org.apache.ibatis.logging.stdout.StdOutImpl

View Code

  然后在对应的类或者方法上加上注解 DS("数据源名称") 即可,例如

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  我们来看下效果

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  是不是很神奇?

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  完整代码:mybatis-plus-dynamic-datasource

  原理探究

   @DS 用于指定数据源,可以注解在方法上或类上,同时存在则采用就近原则 方法上注解 优先于 类上注解

  这可不是我瞎说,官方文档就是这么写的

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  难道一个 @DS 就有如此强大的功能?你们不信,我也不信,它背后肯定有人!

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  那么我们就来揪一揪背后的它

  怎么揪了,这又是个难题,我们先打个断点,看一下调用栈

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  点一下,瞬间高潮了,不是,是瞬间清醒了

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  红线框住的,分 2 点:1: determineDatasource ,2: DynamicDataSourceContextHolder.push 

  我们先看 determineDatasource 

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  1、获取 Method 对象

  2、该方法上是否有 DS 注解,有则取方法的 DS 注解,没有则取方法对应的类上的 DS 注解;这个看明白了没?

  3、获取注解的值,也就是 @DS("mysql_db") 中的 mysql_db 

  4、如果数据源名不为空并且数据原名以动态前缀(#)开头,则你们自己去跟 dsProcessor.determineDatasource 

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

    否则则直接返回数据源名

  针对案例的话,这里肯定是返回类上的数据源名(方法上没有指定数据源,也没有以动态前缀开头)

  我们再来看看 DynamicDataSourceContextHolder.push 

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  很简单,但 LOOKUP_KEY_HOLDER 很有意思

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  是一个栈,而非楼主在spring集成mybatis实现mysql读写分离 采用的

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  至于为什么,人家注释已经写的很清楚了,试问楼主的实现能满足一级一级数据源切换的调用场景吗?

  但不管怎么说, LOOKUP_KEY_HOLDER 的类型还是 ThreadLocal 

  接下来该分析什么?

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  我们回顾下:原理解密 → Spring AOP 实现动态数据源(读写分离),底层原理是什么

  直接跳到总结

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

   框住的 3 条,上面的 2 条在上面已经分析过了把,是不是?你回答是就完事了

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  注意,楼主的 DynamicDataSource 是自实现的类,继承了 spring-jdbc 的 AbstractRoutingDataSource 

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  那我们就找 AbstractRoutingDataSource 的实现类呗

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  发现它就一个实现类,并且是在 spring-jdbc 下,而不是在 com.baomidou 下

  莫非苞米豆有自己的 AbstractRoutingDataSource ? 我们来看看 AbstractDataSource 的实现类有哪些

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  看到了没,那么我们接下来就分析它

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  内容很简单,最重要的 determineDataSource 还是个抽象方法,那没办法了,看它有哪些子类实现

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

   DynamicRoutingDataSource 的 determineDataSource 方法如下

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

    DynamicDataSourceContextHolder 有没有感觉到熟悉?

  想想它的 ThreadLocal<Deque<String>> LOOKUP_KEY_HOLDER ,回忆上来了没?

  出栈,获取到当前的数据源名;接下来该分析谁了?

  那肯定是 getDataSource 方法

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  1、如果数据源为空,那么直接返回默认数据源,对应配置文件中的

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  2、分组数据源,我们的示例代码那么简单,应该没涉及到这个,先不管

  3、所有数据源,是一个 LinkHashMap ,key 是 数据源名 ,value 是数据源

    可想而知,我们示例的数据源获取就是从该 map 获取的

  4、是否启用严格模式,默认不启动。严格模式下未匹配到数据源直接报错,,非严格模式下则使用默认数据源 primary 所设置的数据源

  5、对应 4,未开启严格模式,未匹配到数据源则使用 primary 所设置的数据源

  那现在又该分析谁?肯定是 dataSourceMap 的值是怎么 put 进去的

  我们看哪些地方用到了 dataSourceMap 

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  发现就一个地方进行了 put 

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  那这个 addDataSource 方法又在哪被调用了?

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

   DynamicRoutingDataSource 实现了 InitializingBean ,所以在启动过程中,它的 afterPropertiesSet 方法会被调用,至于为什么,大家自行去查阅

  接下来该分析什么?那肯定是 Map<String, DataSource> dataSources = provider.loadDataSources(); 

  我们跟进 loadDataSources() ,发现有两个类都有该方法

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  那么我们应该跟谁?有两种方法

  1、凭感觉,我们的配置文件是 yml 

  2、打断点,重新启动项目,一目了然

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

   YmlDynamicDataSourceProvider 的 loadDataSources 方法如下

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  (这里留个疑问: dataSourcePropertiesMap 存放的是什么,值是如何 put 进去的?

  继续往下跟 createDataSourceMap 方法

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  1、配置文件中的数据源属性,断点下就很清楚了

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

  2、根据数据源属性创建数据源,然后放进 dataSourceMap 中

  创建数据源的过程就不跟了,感兴趣的自行去研究

  至此,不知道大家清楚了没? 我反正是晕了

苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的!

总结

  1、万变不离其宗,多数据源的原理是不变的

    原理解密 → Spring AOP 实现动态数据源(读写分离),底层原理是什么

  2、苞米豆的多数据源的自动配置类

    com.baomidou.dynamic.datasource.spring.boot.autoconfigure.DynamicDataSourceAutoConfiguration

    这个配置类很重要,很多重要的对象都是在这里注入到 Spring 容器中的

    关于自动配置,大家可参考:springboot2.0.3源码篇 - 自动配置的实现,发现也不是那么复杂

  3、遇到问题,不要立马一头扎进去,自己实现,多查查,看是否有现成的第三方实现

    自己实现,很容易踩别人踩过的坑,容易浪费时间;另外局限性太大,不易拓展,毕竟一人之力有限

原文链接:https://www.cnblogs.com/youzhibing/p/17333630.html

本站文章如无特殊说明,均为本站原创,如若转载,请注明出处:苞米豆的多数据源 → dynamic-datasource-spring-boot-starter,挺香的! - Python技术站

(0)
上一篇 2023年4月22日
下一篇 2023年4月22日

相关文章

  • 如何解决java获取时间相差8小时的问题

    当使用Java中的Date类或者Calendar类获取当前时间时,由于Java默认使用的是UTC(Coordinated Universal Time,协调世界时)时间,可能会导致本地获取的时间与实际时间相差8小时。解决这一问题的方法有以下两种: 1.使用DateFormat进行格式化输出 可以使用SimpleDateFormat类将获取到的Date对象按照…

    Java 2023年5月20日
    00
  • 在dos窗口中编译和运行java文件的方法

    在 DOS 窗口编译和运行 Java 文件的方法可以包含以下步骤: 检查 Java 路径:在 DOS 窗口中,输入命令 java -version,检查 Java 是否已经正确安装,以及 Java 的路径是否已经添加到系统环境变量中。 编写 Java 代码:使用文本编辑器,编写 Java 代码,并将其保存为后缀为 .java 的文件,例如 Hello.jav…

    Java 2023年5月23日
    00
  • Java基础—数据类型

    数据类型 Java 的两大数据类型:内置数据类型、引用数据类型 内置数据类型 Java语言提供了八种基本类型。六种数字类型(四个整数型,两个浮点型),一种字符类型,还有一种布尔型。 byte、short、int、long、float、double、char、boolean 基本类型 范围 byte: (8位)-128~127 short: (26位)一个sh…

    Java 2023年4月17日
    00
  • Java通过接口实现匿名类的实例代码

    在Java中,通过接口可以实现匿名类的实例代码。这可以帮助我们更加灵活地使用接口,并且避免在代码中大量声明类的情况。下面是实现这个过程的完整攻略: 步骤一:创建一个接口 首先,需要创建一个接口。接口是一个抽象的数据类型,它定义类应该实现的方法,但并不提供实现细节。这意味着在接口中声明的方法将在实现接口的类中被实现。 一个示例接口的代码如下: public i…

    Java 2023年5月19日
    00
  • SpringBoot Starter机制及整合tomcat的实现详解

    下面我将详细讲解“SpringBoot Starter机制及整合tomcat的实现详解”。 SpringBoot Starter机制 什么是Starter? 在Spring Boot中,Starter是指用于快速启动某一技术栈的依赖包,通过引入Starter,开发人员可以非常方便地引入一整套封装好的技术栈。 例如,我们想要应用JDBC来实现数据库操作,只需要…

    Java 2023年5月19日
    00
  • Java 中Map 的用法详解

    Java 中 Map 的用法详解 简介 Map 是 Java 中常见的一种数据结构,它存储了一组键值对,其中每个键都唯一对应一个值,而多个键可以对应同一个值。在 Map 中,通过键快速定位对应的值,相对于遍历数组或者列表来说,速度更快。在 Java 中,Map 接口有多个实现类,其中常用的有 HashMap 和 TreeMap。 常用方法介绍 1. put …

    Java 2023年5月26日
    00
  • Spring Kafka中如何通过参数配置解决超时问题详解

    下面我将为您详细讲解“Spring Kafka中如何通过参数配置解决超时问题”的攻略。 背景 在使用Spring Kafka时,如果遇到消费者无法及时消费Kafka消息而导致超时的问题,我们可以通过进行参数配置的方式来解决这个问题。 解决方案 下面是两条示例,以说明如何通过参数配置来解决超时问题: (1)示例一:通过consumer.timeout.ms来解…

    Java 2023年5月20日
    00
  • 从零开始在Centos7上部署SpringBoot项目

    从零开始在CentOS7上部署Spring Boot项目,大致分为以下几个步骤: 安装Java环境 在CentOS7上部署Spring Boot项目,首先需要安装Java环境。可以通过以下命令安装: yum install java-1.8.0-openjdk-devel 安装完成后,可以通过以下命令查看Java版本: java -version 安装Mav…

    Java 2023年5月20日
    00
合作推广
合作推广
分享本页
返回顶部