背景

最近让我做一个大数据的系统,分析了一下,麻烦的地方就是多数据源切换抽取数据。考虑到可以跨服务器跨数据库抽数,再整理数据,就配置了这个动态数据源的解决方案。在此分享给大家。

实现方案

数据库配置文件

我们项目使用的是yml形式的配置文件,采用的是hikari的数据库连接池。第一步我们自然是配置多个数据库源头。

我们找到spring的datasource,在下方配置三个数据源。

  1. spring:
  2. application:
  3. name: dynamicDatasource
  4. datasource:
  5. test1:
  6. driver-class-name: com.mysql.jdbc.Driver
  7. url: jdbc:mysql://127.0.0.1:3306/test1?serverTimezone=GMT%2B8&characterEncoding=utf-8&useSSL=false
  8. username: root
  9. password: 123456
  10. test2:
  11. driver-class-name: com.mysql.jdbc.Driver
  12. url: jdbc:mysql://127.0.0.1:3306/test2?serverTimezone=GMT%2B8&characterEncoding=utf-8&useSSL=false
  13. username: root
  14. password: 123456
  15. test3:
  16. driver-class-name: com.mysql.jdbc.Driver
  17. url: jdbc:mysql://127.0.0.1:3306/test3?serverTimezone=GMT%2B8&characterEncoding=utf-8&useSSL=false
  18. username: root
  19. password: 123456
  20. hikari:
  21. leak-detection-threshold: 2000

定义数据源实体类

我们可以建立个datasourceBean文件夹专门管理数据源的实体类。

我们这里要建立三个实体类。分别对应test1,test2,test3

  1. @Configuration
  2. public class Test1DataSourceBean {
  3. @Value("${spring.datasource.test1.driver-class-name}")
  4. private String test1Driver;
  5. @Value("${spring.datasource.test1.url}")
  6. private String test1Url;
  7. @Value("${spring.datasource.test1.username}")
  8. private String test1Username;
  9. @Value("${spring.datasource.test1.password}")
  10. private String test1Password;
  11. @Bean(name="test1DataSource")
  12. public DataSource test1DataSource() throws Exception{
  13. HikariDataSource dataSource = new HikariDataSource();
  14. dataSource.setDriverClassName(test1Driver);
  15. dataSource.setJdbcUrl(test1Url);
  16. dataSource.setUsername(test1Username);
  17. dataSource.setPassword(test1Password);
  18. return dataSource;
  19. }
  20. }
  1. @Configuration
  2. public class Test2DataSourceBean {
  3. @Value("${spring.datasource.test2.driver-class-name}")
  4. private String test2Driver;
  5. @Value("${spring.datasource.test2.url}")
  6. private String test2Url;
  7. @Value("${spring.datasource.test2.username}")
  8. private String test2Username;
  9. @Value("${spring.datasource.test2.password}")
  10. private String test2Password;
  11. @Bean(name="test2DataSource")
  12. public DataSource test2DataSource() throws Exception{
  13. HikariDataSource dataSource = new HikariDataSource();
  14. dataSource.setDriverClassName(test2Driver);
  15. dataSource.setJdbcUrl(test2Url);
  16. dataSource.setUsername(test2Username);
  17. dataSource.setPassword(test2Password);
  18. return dataSource;
  19. }
  20. }
  1. @Configuration
  2. public class Test3DataSourceBean {
  3. @Value("${spring.datasource.test3.driver-class-name}")
  4. private String test3Driver;
  5. @Value("${spring.datasource.test3.url}")
  6. private String test3Url;
  7. @Value("${spring.datasource.test3.username}")
  8. private String test3Username;
  9. @Value("${spring.datasource.test3.password}")
  10. private String test3Password;
  11. @Bean(name="test3DataSource")
  12. public DataSource test3DataSource() throws Exception{
  13. HikariDataSource dataSource = new HikariDataSource();
  14. dataSource.setDriverClassName(test3Driver);
  15. dataSource.setJdbcUrl(test3Url);
  16. dataSource.setUsername(test3Username);
  17. dataSource.setPassword(test3Password);
  18. return dataSource;
  19. }
  20. }

定义一个枚举类管理数据源

  1. public enum DatabaseType {
  2. test1("test1", "test1"),
  3. test2("test2", "test2"),
  4. test3("test3","test3");
  5. private String name;
  6. private String value;
  7. DatabaseType(String name, String value){
  8. this.name = name;
  9. this.value = value;
  10. }
  11. public String getName(){
  12. return name;
  13. }
  14. public String getValue(){
  15. return value;
  16. }
  17. }

定义一个线程安全的数据源容器

  1. public class DatabaseContextHolder {
  2. private static final ThreadLocal<DatabaseType> contextHolder = new ThreadLocal<>();
  3. public static void setDatabaseType(DatabaseType type){
  4. contextHolder.set(type);
  5. }
  6. public static DatabaseType getDatabaseType(){
  7. return contextHolder.get();
  8. }
  9. }

定义动态数据源

  1. public class DynamicDataSource extends AbstractRoutingDataSource{
  2. protected Object determineCurrentLookupKey() {
  3. return DatabaseContextHolder.getDatabaseType();
  4. }
  5. }

mybatis配置类

网上的很多文章配置出来都会产生数据源循环依赖的问题,这里解决了这个问题。

  1. @Configuration
  2. @MapperScan(basePackages="cn.test.jichi", sqlSessionFactoryRef="sessionFactory")
  3. public class MybatisConfig {
  4. /**
  5. * @Description:设置动态数据源
  6. */
  7. @Bean(name="dynamicDataSource")
  8. @Primary
  9. public DynamicDataSource DataSource(
  10. @Qualifier("test1DataSource") DataSource test1DataSource,
  11. @Qualifier("test2DataSource") DataSource test2DataSource,
  12. @Qualifier("test3DataSource") DataSource test3DataSource){
  13. Map<Object, Object> targetDataSource = new HashMap<>();
  14. targetDataSource.put(DatabaseType.test1, test1DataSource);
  15. targetDataSource.put(DatabaseType.test2, test2DataSource);
  16. targetDataSource.put(DatabaseType.test3, test3DataSource);
  17. DynamicDataSource dataSource = new DynamicDataSource();
  18. dataSource.setTargetDataSources(targetDataSource);
  19. dataSource.setDefaultTargetDataSource(test1DataSource);
  20. return dataSource;
  21. }
  22. /**
  23. * @Description:根据动态数据源创建sessionFactory
  24. */
  25. @Bean(name="sessionFactory")
  26. public SqlSessionFactory sessionFactory(
  27. @Qualifier("test1DataSource") DataSource test1DataSource,
  28. @Qualifier("test2DataSource") DataSource test2DataSource,
  29. @Qualifier("test3DataSource") DataSource test3DataSource) throws Exception{
  30. SqlSessionFactoryBean sessionFactoryBean = new SqlSessionFactoryBean();
  31. //构造方法,解决动态数据源循环依赖问题。
  32. sessionFactoryBean.setDataSource(this.DataSource(test1DataSource,test2DataSource, test3DataSource));
  33. return sessionFactoryBean.getObject();
  34. }
  35. }

提供一个示例

  1. public void testDymnaicDatasource(){
  2. //不切换数据源默认是自己的。
  3. System.out.println("-----默认数据源");
  4. DemoEntity totalCount = demoMapper.getTotalCount();
  5. String nameCount1 = totalCount.getNameCount();
  6. String ageCount2 = totalCount.getAgeCount();
  7. System.out.println("nameCount:"+nameCount1);
  8. System.out.println("ageCount:"+ageCount2);
  9. //数据源切换为branch
  10. System.out.println("-----数据源为test2");
  11. DynamicDataSourceUtils.chooseBranchDataSource();
  12. Integer nameCount = demoMapper.getNameCount();
  13. Integer ageCount = demoMapper.getAgeCount();
  14. System.out.println("nameCount:"+nameCount);
  15. System.out.println("ageCount:"+ageCount);
  16. //数据源为basic
  17. System.out.println("-----数据源为test3");
  18. DynamicDataSourceUtils.chooseBasicDataSource();
  19. Integer ageCount1 = demoMapper.getAgeCount();
  20. System.out.println("ageCount:"+ageCount1);
  21. }

总结

至此实现了多数据源的动态切换。可以在同一个方法里面进行操作多个数据源。

SpringBoot+Mybatis 实现动态数据源切换方案的更多相关文章

  1. SpringBoot学习笔记:动态数据源切换

    SpringBoot学习笔记:动态数据源切换 数据源 Java的javax.sql.DataSource接口提供了一种处理数据库连接的标准方法.通常,DataSource使用URL和一些凭据来建立数据 ...

  2. SpringBoot和Mycat动态数据源项目整合

    SpringBoot项目整合动态数据源(读写分离) 1.配置多个数据源,根据业务需求访问不同的数据,指定对应的策略:增加,删除,修改操作访问对应数据,查询访问对应数据,不同数据库做好的数据一致性的处理 ...

  3. Spring Boot + Mybatis 实现动态数据源

    动态数据源 在很多具体应用场景的时候,我们需要用到动态数据源的情况,比如多租户的场景,系统登录时需要根据用户信息切换到用户对应的数据库.又比如业务A要访问A数据库,业务B要访问B数据库等,都可以使用动 ...

  4. Spring 实现动态数据源切换--转载 (AbstractRoutingDataSource)的使用

    [参考]Spring(AbstractRoutingDataSource)实现动态数据源切换--转载 [参考] 利用Spring的AbstractRoutingDataSource解决多数据源的问题 ...

  5. Spring主从数据库的配置和动态数据源切换原理

    原文:https://www.liaoxuefeng.com/article/00151054582348974482c20f7d8431ead5bc32b30354705000 在大型应用程序中,配 ...

  6. SpringMVC 利用AbstractRoutingDataSource实现动态数据源切换

    SpringMVC 利用AbstractRoutingDataSource实现动态数据源切换 本文转载至:http://exceptioneye.iteye.com/blog/1698064 Spri ...

  7. 【开发笔记】- AbstractRoutingDataSource动态数据源切换,AOP实现动态数据源切换

    AbstractRoutingDataSource动态数据源切换 上周末,室友通宵达旦的敲代码处理他的多数据源的问题,搞的非常的紧张,也和我聊了聊天,大概的了解了他的业务的需求.一般的情况下我们都是使 ...

  8. AbstractRoutingDataSource动态数据源切换,AOP实现动态数据源切换

    版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明.本文链接:https://blog.csdn.net/u012881904/article/de ...

  9. 30个类手写Spring核心原理之动态数据源切换(8)

    本文节选自<Spring 5核心原理> 阅读本文之前,请先阅读以下内容: 30个类手写Spring核心原理之自定义ORM(上)(6) 30个类手写Spring核心原理之自定义ORM(下)( ...

随机推荐

  1. [考试反思]1002csp-s模拟测试56:凌乱

    放假回来状态回升??(玩够了-但是稍困) T1打的不完全对,但是过掉了.很快的想到了二分吧喇叭啦.. 然后T2也挺快想出来了但是挂细节没发现,考试快结束的时候才发现出锅了. 改了过来是正解,但是出题人 ...

  2. CSPS模拟 44

    状态不是很好吧 这套和前边是一套的, skyh在我旁边AK,好像开了三个对拍又在拼小人 T3 正解没调出来,暴力又忘交了qwq 当时心情都要爆炸了 T1 区间$gcd$乘区间长度的最大值 暴力是$n^ ...

  3. ES入门宝典(详细截图版)

    本文使用版本基于elasticsearch-6.4.0 1.什么是ES? 官网: https://www.elastic.co/products/elasticsearch  中文官网:https:/ ...

  4. 【RocketMQ源码学习】- 3. Client 发送同步消息

    本文较长,代码后面给了方法简图,希望给你帮助 发送的方式 同步发送 异步发送 消息的类型 普通消息 顺序消息 事务消息 发送同步消息的时序图 为了防止读者朋友嫌烦,可以看下时序图,后面我也会给出方法的 ...

  5. coco-stuff and thing

    Defining things and stuff. The literature provides definitions for several aspects of stuff and thin ...

  6. JavaScript-原型对象与原型链

    原型对象 1.每个对象一定会有一个原型对象 2.原型对象实际是构造实例对象的构造器中的一个属性,只不过这个属性是个对象 3.这个原型对象中的属性与方法,都会被对象实例所共享(类似python中的类方法 ...

  7. 如何在HTML中设置字体颜色,你知道这几种方式吗?

    color设置字体颜色 在color设置字体颜色之前,我们首先了解color在CSS中有几种取值方式,一共有4种方式,若有不全还请在评论区告知谢谢,4种方式如下: 十六进制.十进制. 英文单词.十六进 ...

  8. Webpack 4 Tree Shaking 终极优化指南

    几个月前,我的任务是将我们组的 Vue.js 项目构建配置升级到 Webpack 4.我们的主要目标之一是利用 tree-shaking 的优势,即 Webpack 去掉了实际上并没有使用的代码来减少 ...

  9. heml基础笔记

    1.html:全名是超文本标记语言, hyper text mark language 2.html的标签 <p> :  <+和标签名 p+>结合而成. 每个标签都有自己的结束 ...

  10. Python 常用模块系列(2)--time module and datatime module

    import time print (help(time)) #time帮助文档 1. time模块--三种时间表现形式: 1° 时间戳--如:time.time()  #从python创立以来,到当 ...