我的编程空间,编程开发者的网络收藏夹
学习永远不晚

Spring Boot 2.7.5 HikariCP 连接池多数据源配置

短信预约 -IT技能 免费直播动态提醒
省份

北京

  • 北京
  • 上海
  • 天津
  • 重庆
  • 河北
  • 山东
  • 辽宁
  • 黑龙江
  • 吉林
  • 甘肃
  • 青海
  • 河南
  • 江苏
  • 湖北
  • 湖南
  • 江西
  • 浙江
  • 广东
  • 云南
  • 福建
  • 海南
  • 山西
  • 四川
  • 陕西
  • 贵州
  • 安徽
  • 广西
  • 内蒙
  • 西藏
  • 新疆
  • 宁夏
  • 兵团
手机号立即预约

请填写图片验证码后获取短信验证码

看不清楚,换张图片

免费获取短信验证码

Spring Boot 2.7.5 HikariCP 连接池多数据源配置

一. 引言

当前项目遇到需要连接多个数据库的场景,此时需要引入多数据源了.
还有一些诸如以下的场景:

  1. 与第三方对接时,有些合作方并不会为了你的某些需求而给你开发一个功能,他们可以提供给你一个可以访问数据源的只读账号,你需要获取什么数据由你自己进行逻辑处理,这时候就避免不了需要进行多数据源了
  2. 业务数据达到了一个量级,使用单一数据库存储达到了一个瓶颈,需要进行分库分表等操作进行数据管理,在操作数据时,不可避免的涉及到多数据源问题

网上搜索发现有不少的示例都是错误的,于是自己打算写一篇,也方便以后自己需要用到的时候拿来参考.

如果你只想要看代码请直接拉到最后看完整代码哦~
如果你用的是Mybatis-Plus请查看官方文档↓↓↓↓
MP多数据源配置

至于MyCat、Sharding-JDBC之类的中间件我们今天不谈,只分享多数据源配置方案.

二. 实践

HikariCP项目仓库

注意
Springboot 2.0开始开始默认引入了HikariCP依赖,所以我们不需要单独引入!

HikariDataSource是 HikariCP 开放给用户使用连接池的主要操作类。所以,我们创建一个 HikariCP 的连接池,其实就是构造一个HikariDataSource.

1. 首先我们来看一下正常情况下我们配置的单数据源的配置

spring:  datasource:    url: jdbc:mysql://127.0.0.1:3306/db_xxx?useSSL=false&autoReconnect=true&characterEncoding=utf8    driver-class-name: com.mysql.cj.jdbc.Driver    username: root    password: root    # 指定为HikariDataSource    type: com.zaxxer.hikari.HikariDataSource    # hikari连接池配置    hikari:      #连接池名      pool-name: HikariCP      #最小空闲连接数      minimum-idle: 5      # 空闲连接存活最大时间,默认10分钟      idle-timeout: 600000      # 连接池最大连接数,默认是10      maximum-pool-size: 10      # 此属性控制从池返回的连接的默认自动提交行为,默认值:true      auto-commit: true      # 此属性控制池中连接的最长生命周期,值0表示无限生命周期,默认30分钟      max-lifetime: 1800000      # 数据库连接超时时间,默认30秒      connection-timeout: 30000      # 连接测试query      connection-test-query: SELECT 1

2. 看看多数据源的配置示例(下面都以这个配置为准)

spring:  datasource:    # 数据源-1    primary:      url: jdbc:mysql://127.0.0.1:3306/db_market?useSSL=false&autoReconnect=true&characterEncoding=utf8      driver-class-name: com.mysql.cj.jdbc.Driver      username: root      password: root      # 指定为HikariDataSource      type: com.zaxxer.hikari.HikariDataSource      # hikari连接池配置 对应 HikariConfig 配置属性类      hikari:        pool-name: HikariCP-Primary        #最小空闲连接数        minimum-idle: 5        # 空闲连接存活最大时间,默认10分钟        idle-timeout: 600000        # 连接池最大连接数,默认是10        maximum-pool-size: 10        # 此属性控制从池返回的连接的默认自动提交行为,默认值:true        auto-commit: true        # 此属性控制池中连接的最长生命周期,值0表示无限生命周期,默认30分钟        max-lifetime: 1800000        # 数据库连接超时时间,默认30秒        connection-timeout: 30000        # 连接测试query        connection-test-query: SELECT 1    # 数据源-2    secondary:      url: jdbc:mysql://192.168.58.212:3306/db_market?useSSL=false&autoReconnect=true&characterEncoding=utf8      driver-class-name: com.mysql.cj.jdbc.Driver      username: root      password: 12345678      # 指定为HikariDataSource      type: com.zaxxer.hikari.HikariDataSource      # hikari连接池配置      hikari:        pool-name: HikariCP-Secondary        minimum-idle: 5        idle-timeout: 600000        maximum-pool-size: 10        auto-commit: true        max-lifetime: 1800000        connection-timeout: 30000        connection-test-query: SELECT 1

3. 接下来看看网上出现的不少这样子的例子(这里认为是错误示例)

@Bean(name = "primaryDataSource")@ConfigurationProperties(prefix = "spring.datasource.primary")public DataSource primaryDataSource() {   return DataSourceBuilder.create().build();} @Bean(name = "usersDataSource")@ConfigurationProperties(prefix = "spring.datasource.secondary")public DataSource secondaryDataSource() {   return DataSourceBuilder.create().build();}

对于多数据源的配置,这里由于 hikari 这个属性对应的值还在下一层,所以使用上面这种配置是不生效的. 因为:

  • 这里使用了Hikari,所以这里创建的DataSource这个Bean其实是HikariDataSource.
  • @ConfigurationProperties(prefix = “spring.datasource.primary”)会将primary下的属性赋值给HikariDataSource这个Bean中的对应的属性(其实就是给HikariConfig这个赋值,更具体的信息大家可以自行搜索DataSource的初始化流程. 下面源码图中可看到HikariDataSource继承了HikariConfig).
  • 但是,hikari这个属性因为是spring.datasource.primary的第二层属性,并不能正确设置进去(后面我们会验证这个问题,注意看我下图中框出来LOGGER打印那里).
    在这里插入图片描述

4. 下面是我完整的多数据源配置类(最终版本会分成两个进行配置)

import com.zaxxer.hikari.HikariDataSource;import org.springframework.beans.factory.annotation.Qualifier;import org.springframework.boot.autoconfigure.jdbc.DataSourceProperties;import org.springframework.boot.context.properties.ConfigurationProperties;import org.springframework.context.annotation.Bean;import org.springframework.context.annotation.Configuration;import org.springframework.context.annotation.Primary;import org.springframework.jdbc.core.JdbcTemplate;import javax.sql.DataSource;@Configurationpublic class HikariDataSourceConfiguration {    @Primary    @Bean("primaryDataSourceProperties")    @ConfigurationProperties("spring.datasource.primary")    public DataSourceProperties primaryDataSourceProperties() {        return new DataSourceProperties();    }    @Primary    @Bean("primaryDataSource")    @Qualifier(value = "primaryDataSource")    // 留意下面这行    @ConfigurationProperties(prefix = "spring.datasource.primary.hikari")    public HikariDataSource primaryDataSource() {        return primaryDataSourceProperties().initializeDataSourceBuilder().type(HikariDataSource.class).build();    }    @Bean("secondaryDataSourceProperties")    @ConfigurationProperties("spring.datasource.secondary")    public DataSourceProperties secondaryDataSourceProperties() {        return new DataSourceProperties();    }    @Bean("secondaryDataSource")    @Qualifier(value = "secondaryDataSource")    // 留意下面这行    @ConfigurationProperties(prefix = "spring.datasource.secondary.hikari")    public HikariDataSource secondaryDataSource() {        return secondaryDataSourceProperties().initializeDataSourceBuilder().type(HikariDataSource.class).build();    }    @Bean(name = "primaryJdbcTemplate")    public JdbcTemplate primaryJdbcTemplate(@Qualifier("primaryDataSource") DataSource dataSource) {        return new JdbcTemplate(dataSource);    }    @Bean(name = "secondaryJdbcTemplate")    public JdbcTemplate secondaryJdbcTemplate(@Qualifier("secondaryDataSource") DataSource dataSource) {        return new JdbcTemplate(dataSource);    }}

参考资料(实践证明有事找官方文档是挺标准的)↓↓↓↓↓
Spring官方文档多数据配置示例

注意上面我在两个
@ConfigurationProperties(prefix = “spring.datasource.primary.hikari”)
@ConfigurationProperties(prefix = “spring.datasource.secondary.hikari”)
第一、第二数据源配置都做了标记

验证我们上面说的配置失效的问题,步骤:
1、当我们注释掉这两行,此时的配置就相当于是上面提到的错误示例的样子了
2、多数据源配置以上面代码为准,我分别设置两个数据源的连接池名称是HikariCP-PrimaryHikariCP-Secondary,再结合最上面贴图红框中HikariDataSource构造方法知道Bean初始化时会打印数据池名称

LOGGER.info(“{} - Starting…”, configuration.getPoolName());

启动项目,查看控制台
在这里插入图片描述
此时,你会发现,数据源初始化出来的并不是我们需要的,这足以说明我们配置的spring.datasource.primary.hikari这一层属性没有被正确地设置到HikariConfig中(虽然能跑起来,可以正确连接到对应的数据源,但是其它的配置并未生效),而是HikariConfig在初始化时自动给每个数据源加上了名字,可以见以下源码(HikariConfig.class)
在这里插入图片描述
假如,这时候我们把
第一、第二数据源配置上面的@ConfigurationProperties(prefix = “spring.datasource.primary.hikari”)注解打开,再启动项目,则可以清晰地看到我们自己设置的属性被应用到了HikariConfig中.
在这里插入图片描述
这时候就可以正常地读入hikari连接池的配置了.

有不理解的可以自己看看DataSource的初始化流程即可.

5. 接下来我们做一下测试

import cn.hutool.json.JSONUtil;import org.junit.jupiter.api.Test;import org.springframework.boot.test.context.SpringBootTest;import org.springframework.jdbc.core.JdbcTemplate;import javax.annotation.Resource;import javax.sql.DataSource;import java.sql.Connection;import java.sql.SQLException;import java.util.List;import java.util.Map;@SpringBootTestpublic class MultiDataSourceTest {    @Resource    private JdbcTemplate primaryJdbcTemplate;    @Resource    private JdbcTemplate secondaryJdbcTemplate;    @Resource(name = "primaryDataSource")    private DataSource primaryDataSource;    @Resource(name = "secondaryDataSource")    private DataSource secondaryDataSource;    @Test    public void testPrimaryDataSourceConnect() {        String sql = "SELECT * FROM `apk_category`";        List<Map<String, Object>> result = primaryJdbcTemplate.queryForList(sql);        System.out.println("primary data source :\t"+ JSONUtil.toJsonStr(result));    }    @Test    public void testSecondaryDataSourceConnect() {        String sql = "SELECT * FROM `apk_category`";        List<Map<String, Object>> result = secondaryJdbcTemplate.queryForList(sql);        System.out.println("secondary data source :\t"+ JSONUtil.toJsonStr(result));    }    @Test    void testGetConnection() {        try (Connection connection = primaryDataSource.getConnection()) {            System.out.println("获取到的primaryDataSource连接对象" + connection);        } catch (SQLException e) {            e.printStackTrace();        }        try (Connection connection = secondaryDataSource.getConnection()) {            System.out.println("获取到的secondaryDataSource连接对象" + connection);        } catch (SQLException e) {            e.printStackTrace();        }    }}

三.完整代码

  1. PrimaryDataSourceConfiguration.class
import com.zaxxer.hikari.HikariDataSource;import org.apache.ibatis.session.SqlSessionFactory;import org.mybatis.spring.SqlSessionFactoryBean;import org.mybatis.spring.annotation.MapperScan;import org.springframework.beans.factory.annotation.Qualifier;import org.springframework.boot.autoconfigure.jdbc.DataSourceProperties;import org.springframework.boot.context.properties.ConfigurationProperties;import org.springframework.context.annotation.Bean;import org.springframework.context.annotation.Configuration;import org.springframework.context.annotation.Primary;import org.springframework.core.io.support.PathMatchingResourcePatternResolver;import org.springframework.jdbc.core.JdbcTemplate;import javax.sql.DataSource;@Configuration@MapperScan(basePackages = "com.market.mapper", sqlSessionFactoryRef = "primarySqlSessionFactory")public class PrimaryDataSourceConfiguration {        public static final String MAPPER_LOCATION = "classpath:mapper    @Primary    @ConfigurationProperties("spring.datasource.primary")    public DataSourceProperties primaryDataSourceProperties() {        return new DataSourceProperties();    }        @Primary    @Bean("primaryDataSource")    @Qualifier(value = "primaryDataSource")    @ConfigurationProperties(prefix = "spring.datasource.primary.hikari")    public HikariDataSource primaryDataSource() {        return primaryDataSourceProperties().initializeDataSourceBuilder().type(HikariDataSource.class).build();    }    @Bean(name = "primaryTransactionManager")    @Primary    public PlatformTransactionManager primaryTransactionManager(@Qualifier("primaryDataSource") DataSource dataSource) {        return new DataSourceTransactionManager(dataSource);    }        @Primary    @Bean(name = "primarySqlSessionFactory")    public SqlSessionFactory primarySqlSessionFactory(@Qualifier("primaryDataSource") DataSource dataSource) throws Exception {        final SqlSessionFactoryBean sessionFactoryBean = new SqlSessionFactoryBean();        sessionFactoryBean.setDataSource(dataSource);        sessionFactoryBean.setMapperLocations(new PathMatchingResourcePatternResolver().getResources(PrimaryDataSourceConfiguration.MAPPER_LOCATION));        return sessionFactoryBean.getObject();    }        @Bean(name = "primaryJdbcTemplate")    public JdbcTemplate primaryJdbcTemplate(@Qualifier("primaryDataSource") DataSource dataSource) {        return new JdbcTemplate(dataSource);    }}
  1. SecondaryDataSourceConfiguration.class
import com.zaxxer.hikari.HikariDataSource;import org.apache.ibatis.session.SqlSessionFactory;import org.mybatis.spring.SqlSessionFactoryBean;import org.mybatis.spring.annotation.MapperScan;import org.springframework.beans.factory.annotation.Qualifier;import org.springframework.boot.autoconfigure.jdbc.DataSourceProperties;import org.springframework.boot.context.properties.ConfigurationProperties;import org.springframework.context.annotation.Bean;import org.springframework.context.annotation.Configuration;import org.springframework.core.io.support.PathMatchingResourcePatternResolver;import org.springframework.jdbc.core.JdbcTemplate;import javax.sql.DataSource;@Configuration@MapperScan(basePackages = "com.market.mapper2", sqlSessionFactoryRef = "secondarySqlSessionFactory")public class SecondaryDataSourceConfiguration {        public static final String MAPPER_LOCATION = "classpath:mapper2    @ConfigurationProperties("spring.datasource.secondary")    public DataSourceProperties secondaryDataSourceProperties() {        return new DataSourceProperties();    }        @Bean("secondaryDataSource")    @Qualifier(value = "secondaryDataSource")    @ConfigurationProperties(prefix = "spring.datasource.secondary.hikari")    public HikariDataSource secondaryDataSource() {        return secondaryDataSourceProperties().initializeDataSourceBuilder().type(HikariDataSource.class).build();    }    @Bean(name = "secondaryTransactionManager")    public PlatformTransactionManager secondaryTransactionManager(@Qualifier("secondaryDataSource") DataSource dataSource) {        return new DataSourceTransactionManager(dataSource);    }    @Bean(name = "secondarySqlSessionFactory")    public SqlSessionFactory secondarySqlSessionFactory(@Qualifier("secondaryDataSource") DataSource dataSource) throws Exception {        final SqlSessionFactoryBean sessionFactoryBean = new SqlSessionFactoryBean();        sessionFactoryBean.setDataSource(dataSource);        sessionFactoryBean.setMapperLocations(new PathMatchingResourcePatternResolver().getResources(SecondaryDataSourceConfiguration.MAPPER_LOCATION));        return sessionFactoryBean.getObject();    }        @Bean(name = "secondaryJdbcTemplate")    public JdbcTemplate secondaryJdbcTemplate(@Qualifier("secondaryDataSource") DataSource dataSource) {        return new JdbcTemplate(dataSource);    }}

说明一下:
之前我们使用@Transactional的时候,并没有通过value或者transactionManager设置事务管理器,这是为什么?
这是因为我们在spring容器中只定义了一个事务管理器(实现TransactionManagementConfigurer接口的annotationDrivenTransactionManager()方法,该方法返回的事务管理器就是系统默认使用的),spring启动事务的时候,默认会按类型在容器中查找事务管理器,刚好容器中只有一个,就拿过来用了,如果有多个的时候,如果你不指定,spring是不知道具体要用哪个事务管理器的。

使用事务时大概是这样子: @Transactional(transactionManager = “transactionManager1”, propagation = Propagation.REQUIRED),声明式事务中自己指定需要使用的事务管理器,就是我们刚刚自己手动给每个数据源配置的事务管理器。
假如,系统中有多个事务管理器,你需要系统指定其中的一个事务管理器是默认的,那么只需要自己写一个配置类实现TransactionManagementConfigurer接口,并覆写**annotationDrivenTransactionManager()**即可。
源码如下:

package org.springframework.transaction.annotation;import org.springframework.transaction.TransactionManager;public interface TransactionManagementConfigurer {    TransactionManager annotationDrivenTransactionManager();}

示例:

import org.springframework.context.annotation.Configuration;import org.springframework.transaction.PlatformTransactionManager;import org.springframework.transaction.TransactionManager;import org.springframework.transaction.annotation.TransactionManagementConfigurer;import javax.annotation.Resource;@Configurationpublic class CustomTransactionManagement implements TransactionManagementConfigurer {// 假设自己需要把主数据源配置的事务管理器作为默认的,也可以直接在PrimaryDataSourceConfiguration类实现接口    @Resource(name = "primaryTransactionManager")    private PlatformTransactionManager txManager;            @Override    public TransactionManager annotationDrivenTransactionManager() {        return txManager;    }}

如果事务不生效,自己手动开启事务支持:@EnableTransactionManagement,默认情况下是自动装配的时候配置了事务支持的,详情请查看 TransactionAutoConfiguration这个类的源码
在这里插入图片描述

至于你后面获取到不同的数据源如何操作取决于你自己了.

来源地址:https://blog.csdn.net/qq_17229141/article/details/128408860

免责声明:

① 本站未注明“稿件来源”的信息均来自网络整理。其文字、图片和音视频稿件的所属权归原作者所有。本站收集整理出于非商业性的教育和科研之目的,并不意味着本站赞同其观点或证实其内容的真实性。仅作为临时的测试数据,供内部测试之用。本站并未授权任何人以任何方式主动获取本站任何信息。

② 本站未注明“稿件来源”的临时测试数据将在测试完成后最终做删除处理。有问题或投稿请发送至: 邮箱/279061341@qq.com QQ/279061341

Spring Boot 2.7.5 HikariCP 连接池多数据源配置

下载Word文档到电脑,方便收藏和打印~

下载Word文档

猜你喜欢

Spring Boot 使用 HikariCP 连接池配置详解

Spring Boot 使用 HikariCP 连接池配置详解 HikariCP 是一个高性能的 JDBC 连接池组件。 Spring Boot 2.x 将其作为默认的连接池组件,项目中添加 spring-boot-starter-jdbc
2023-08-18

Tomcat的数据源连接池怎么配置

在Tomcat中配置数据源连接池需要在context.xml文件中进行配置。以下是配置步骤:1、打开Tomcat安装目录下的conf文件夹,找到context.xml文件。2、在context.xml文件中添加数据源配置,示例配置如下:
Tomcat的数据源连接池怎么配置
2024-03-07

Spring Boot配置多数据源的四种方式

1、导读 在日常开发中我们都是以单个数据库进行开发,在小型项目中是完全能够满足需求的。 但是,当我们牵扯到像淘宝、京东这样的大型项目的时候,单个数据库就难以承受用户的CRUD操作。 那么此时,我们就需要使用多个数据源进行读写分离的操作,这种
2023-08-20

解决spring boot 1.5.4 配置多数据源的问题

spring boot 已经支持多数据源配置了,无需网上好多那些编写什么类的,特别麻烦,看看如下解决方案,官方的,放心!1.首先定义数据源配置#=====================multiple database config===
2023-05-31

多数据源怎么利用spring boot进行配置

本篇文章给大家分享的是有关多数据源怎么利用spring boot进行配置,小编觉得挺实用的,因此分享给大家学习,希望大家阅读完这篇文章后可以有所收获,话不多说,跟着小编一起来看看吧。多数据源配置创建一个Spring配置类,定义两个DataS
2023-05-31

使用Spring Boot如何实现配置数据库链接池

使用Spring Boot如何实现配置数据库链接池?相信很多没有经验的人对此束手无策,为此本文总结了问题出现的原因和解决方法,通过这篇文章希望你能解决这个问题。配置方法基于当前的1.5.2.RELEASE的Spring Boot。依照官方文
2023-05-31

详解基于Spring Boot与Spring Data JPA的多数据源配置

由于项目需要,最近研究了一下基于spring Boot与Spring Data JPA的多数据源配置问题。以下是传统的单数据源配置代码。这里使用的是Spring的Annotation在代码内部直接配置的方式,没有使用任何XML文件。@Con
2023-05-31

详解Spring Boot下Druid连接池的使用配置分析

引言: 在Spring Boot下默认提供了若干种可用的连接池,Druid来自于阿里系的一个开源连接池,在连接池之外,还提供了非常优秀的监控功能,这里讲解如何与Spring Boot实现集成。1. 环境描述spring Boot 1.4.
2023-05-31

详解Spring Boot整合Mybatis实现 Druid多数据源配置

一、多数据源的应用场景目前,业界流行的数据操作框架是 Mybatis,那 Druid 是什么呢?Druid 是 Java 的数据库连接池组件。Druid 能够提供强大的监控和扩展功能。比如可以监控 SQL ,在监控业务可以查询慢查询 SQL
2023-05-31

Spring Boot多数据源及其事务管理配置方法

准备工作先给我们的项目添加Spring-JDBC依赖和需要访问数据库的驱动依赖。配置文件spring.datasource.prod.driverClassName=com.mysql.jdbc.Driverspring.datasourc
2023-05-31

如何为 Golang 数据库连接配置连接池?

如何为 go 数据库连接配置连接池?使用 database/sql 包中的 db 类型创建数据库连接;设置 maxopenconns 以控制最大并发连接数;设置 maxidleconns 以设定最大空闲连接数;设置 connmaxlifet
如何为 Golang 数据库连接配置连接池?
2024-05-14

编程热搜

  • Python 学习之路 - Python
    一、安装Python34Windows在Python官网(https://www.python.org/downloads/)下载安装包并安装。Python的默认安装路径是:C:\Python34配置环境变量:【右键计算机】--》【属性】-
    Python 学习之路 - Python
  • chatgpt的中文全称是什么
    chatgpt的中文全称是生成型预训练变换模型。ChatGPT是什么ChatGPT是美国人工智能研究实验室OpenAI开发的一种全新聊天机器人模型,它能够通过学习和理解人类的语言来进行对话,还能根据聊天的上下文进行互动,并协助人类完成一系列
    chatgpt的中文全称是什么
  • C/C++中extern函数使用详解
  • C/C++可变参数的使用
    可变参数的使用方法远远不止以下几种,不过在C,C++中使用可变参数时要小心,在使用printf()等函数时传入的参数个数一定不能比前面的格式化字符串中的’%’符号个数少,否则会产生访问越界,运气不好的话还会导致程序崩溃
    C/C++可变参数的使用
  • css样式文件该放在哪里
  • php中数组下标必须是连续的吗
  • Python 3 教程
    Python 3 教程 Python 的 3.0 版本,常被称为 Python 3000,或简称 Py3k。相对于 Python 的早期版本,这是一个较大的升级。为了不带入过多的累赘,Python 3.0 在设计的时候没有考虑向下兼容。 Python
    Python 3 教程
  • Python pip包管理
    一、前言    在Python中, 安装第三方模块是通过 setuptools 这个工具完成的。 Python有两个封装了 setuptools的包管理工具: easy_install  和  pip , 目前官方推荐使用 pip。    
    Python pip包管理
  • ubuntu如何重新编译内核
  • 改善Java代码之慎用java动态编译

目录