V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
louislivi
V2EX  ›  Java

springboot 多数据源,最简单的整合方式

  •  1
     
  •   louislivi · 2019-11-19 10:46:17 +08:00 · 3356 次点击
    这是一个创建于 1613 天前的主题,其中的信息可能已经有所发展或是发生改变。

    简介

    相信大家有配置过多数据源,或者即将配置多数据的朋友们,会发现网上大概有以下几种方案:

    • 1.使用 AOP 切片进行动态数据源切换
    • 2.使用MapperScanbasePackages配置不同的 mapper 目录以及 template
    • 3.数据库代理中间件 这两种方式都能实现多数据源但是各有缺点:
    • 1.无法实现多数据源XA事物(全局事物管理|JTA)这个缺点非常致命,配了多数据源但是没有全局事物那有什么用纯属坑爹,网上还有很多帖子教程使用这种虽然配置稍微简单但是如果你要用到全局事物根本没有用。
    • 2.这种方式是可以结合JTA实现全局事物,目前本人在业务中也采用这种方式在线上跑,经过多次调试以及线上运维有一点问题不可置疑就是麻烦!你会遇到需要整合druid连接池,还有全局事物如果你找网上帖子跟着流程走配完多多少少可能还是有些小问题。
    • 3.数据源代理可能是很好的一种方式,大多巨头公司都是采用这种方式,而且开发业务人员不用再考虑这些问题,使用代理进行切割以及连接池等都能实现,但是有一个很尴尬的问题就是开源的不好用,因为很多不适合自身的业务,而且自己开发也不现实成本过高。

    这时候我在考虑一个问题,为什么不可以像其他语言框架一样直接引入一个依赖在yml文件中配置就可以了呢,所有就有了现在的最简方案。

    源码地址

    希望大家可以 star 支持一下,后续还会加入其它依赖的简易整合。 https://github.com/louislivi/fastdep

    开始

    版本:

    springboot:2.0+

    引入依赖:
    • Maven
    <dependency>
        <groupId>com.louislivi.fastdep</groupId>
        <artifactId>fastdep-datasource</artifactId>
        <version>1.0.0</version>
    </dependency>
    
    • Gradle
    compile group: 'com.louislivi.fastdep', name: 'fastdep-datasource', version: '1.0.0'
    
    application.yml 配置文件:
    fastdep:
      datasource:
        test: #数据源名称可随意取
          mapper: com.louislivi.fastdep.test.mapper.test #当前数据源对应的 mapper 目录不能多个数据源相同
          password: 123456
          url: jdbc:mysql://127.0.0.1:3306/douyin?serverTimezone=Asia/Chongqing&useLegacyDatetimeCode=false&nullNamePatternMatchesAll=true&zeroDateTimeBehavior=CONVERT_TO_NULL&tinyInt1isBit=false&autoReconnect=true&useSSL=false&pinGlobalTxToPhysicalConnection=true
          driverClassName: com.mysql.cj.jdbc.Driver
          username: root
    #      # 下面为 druid 连接池的补充设置
    #      initialSize: 10
    #      minIdle: 5
    #      maxActive: 100
    #      connectionInitSqls: 'set names utf8mb4;'
        test2: #数据源名称可随意取
          mapper: com.louislivi.fastdep.test.mapper.test2 #当前数据源对应的 mapper 目录不能多个数据源相同
          password: 123456
          url: jdbc:mysql://127.0.0.1:3306/test2?serverTimezone=Asia/Chongqing&useLegacyDatetimeCode=false&nullNamePatternMatchesAll=true&zeroDateTimeBehavior=CONVERT_TO_NULL&tinyInt1isBit=false&autoReconnect=true&useSSL=false&pinGlobalTxToPhysicalConnection=true
          driverClassName: com.mysql.cj.jdbc.Driver
          username: root
    #      # 下面为 druid 连接池的补充设置
    #      initialSize: 10
    #      minIdle: 5
    #      maxActive: 100
    #      connectionInitSqls: 'set names utf8mb4;'
    

    这就结束了? 没错就是这么简单。 是不是很简单,你去网上招贴子你会发现大同小异都是教你一直加文件进行配置,如果是MapperScan加一个数据源,每次都要又加一个java类。

    原理

    使用ImportBeanDefinitionRegistrar BeanDefinitionBuilder.genericBeanDefinition动态注入Bean其实很简单有兴趣可以去看看源码。

    最后

    防止有其他问题贴出我完整pom.xml下引入的依赖:

    <dependencies>
            <dependency>
                <groupId>org.springframework.boot</groupId>
                <artifactId>spring-boot-starter-web</artifactId>
                <version>2.1.5.RELEASE</version>
            </dependency>
            <dependency>
                <groupId>mysql</groupId>
                <artifactId>mysql-connector-java</artifactId>
                <version>8.0.11</version>
            </dependency>
            <dependency>
                <groupId>com.louislivi.fastdep</groupId>
                <artifactId>fastdep-datasource</artifactId>
                <version>1.0.0</version>
            </dependency>
        </dependencies>
    

    希望大家能够支持开源,给个小星星,后续还会继续开发其他依赖的整合以及目前多数据的优化后续支持Hibernate等,甚至兼容其他框架使用。fastdepjava整合依赖更简单。在此也招募有志同道合的coder共同完善这个项目。

    5 条回复    2022-09-17 16:06:30 +08:00
    w292614191
        1
    w292614191  
       2019-11-19 15:52:55 +08:00
    网上不也是这样的吗?差不多啊,都是配置文件写几个数据源。
    我现在在做自定义报表,我们是前端写数据源相关信息,然后加密保存下来,根据数据集的需求来切换。
    louislivi
        2
    louislivi  
    OP
       2019-11-25 16:13:28 +08:00
    @w292614191 哪里网上都是 AOP 切换数据源和 mapperScan 类, 都是需要写 java 类实现的好吗
    Zhangxiaopa
        3
    Zhangxiaopa  
       2020-07-13 14:33:15 +08:00
    大佬 方便留个绿色联系方式或者企鹅吗
    louislivi
        4
    louislivi  
    OP
       2020-07-13 15:24:30 +08:00
    autoname
        5
    autoname  
       2022-09-17 16:06:30 +08:00
    @louislivi 谢谢楼主,刚好有这个需求
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   2195 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 25ms · UTC 00:23 · PVG 08:23 · LAX 17:23 · JFK 20:23
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.