spring集成mybatis实现mysql读写分离

前言

       在网站的用户达到一定规模后, 数据库因为负载压力过高而成为网站的瓶颈。幸运的是目前大部分的主流数据库都提供主从热备功能,通过配置两台数据库主从关系,可以将一台数据库的数据更新同步到另一台服务器上。网站利用数据库的这一功能,实现数据库读写分离,从而改善数据库负载压力。如下图所示:

 

 

  应用服务器在写数据的时候,访问主数据库,主数据库通过主从复制机制将数据更新同步到从数据库,这样当应用服务器读数据的时候,就可以通过从数据库获得数据。为了便于应用程序访问读写分离后的数据库,通常在应用服务器使用专门的数据库访问模块,使数据库读写分离对应用透明。

摘自《大型网站技术架构 _ 核心原理与案例分析》

       而本博客就是来实现“专门的数据库访问模块”,使数据库读写分离对应用透明。另外,mysql 数据库的主从复制可以参考我的mysql5.7.18 的安装与主从复制。注意,数据库实现了主从复制,才能做数据库的读写分离,所以,没有实现数据库主从复制的记得先去实现数据库的主从复制

配置读写数据源 (主从数据库)

       mysqldb.properties

#主数据库数据源
jdbc.driverClassName=com.mysql.jdbc.Driver
jdbc.url=jdbc:mysql://192.168.0.4:3306/mybatis?useUnicode=true&characterEncoding=utf-8&useSSL=false
jdbc.username=root
jdbc.password=123456
jdbc.initialSize=1
jdbc.minIdle=1
jdbc.maxActive=20
jdbc.maxWait=60000
jdbc.removeAbandoned=true
jdbc.removeAbandonedTimeout=180
jdbc.timeBetweenEvictionRunsMillis=60000
jdbc.minEvictableIdleTimeMillis=300000
jdbc.validationQuery=SELECT 1
jdbc.testWhileIdle=true
jdbc.testOnBorrow=false
jdbc.testOnReturn=false

#从数据库数据源
slave.jdbc.driverClassName=com.mysql.jdbc.Driver
slave.jdbc.url
=jdbc:mysql://192.168.0.221:3306/mybatis?useUnicode=true&characterEncoding=utf-8&useSSL=false
slave.jdbc.username=root
slave.jdbc.password
=123456
slave.jdbc.initialSize
=1
slave.jdbc.minIdle
=1
slave.jdbc.maxActive
=20
slave.jdbc.maxWait
=60000
slave.jdbc.removeAbandoned
=true
slave.jdbc.removeAbandonedTimeout
=180
slave.jdbc.timeBetweenEvictionRunsMillis
=60000
slave.jdbc.minEvictableIdleTimeMillis
=300000
slave.jdbc.validationQuery
=SELECT 1
slave.jdbc.testWhileIdle
=true
slave.jdbc.testOnBorrow
=false
slave.jdbc.testOnReturn
=false

    主、从数据库的地址记得改成自己的,账号和密码也需要改成自己的;其他配置项,大家可以酌情自行设置

       mybatis-spring.xml

<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
    xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:context="http://www.springframework.org/schema/context"
    xmlns:aop="http://www.springframework.org/schema/aop" xmlns:tx="http://www.springframework.org/schema/tx"
    xsi:schemaLocation="http://www.springframework.org/schema/beans 
     http://www.springframework.org/schema/beans/spring-beans.xsd
     http://www.springframework.org/schema/context
     http://www.springframework.org/schema/context/spring-context.xsd
     http://www.springframework.org/schema/aop
     http://www.springframework.org/schema/aop/spring-aop.xsd
     http://www.springframework.org/schema/tx 
     http://www.springframework.org/schema/tx/spring-tx.xsd">
&lt;!-- master数据源 --&gt;
&lt;bean id="masterDataSource" <span style="color: rgba(0, 0, 255, 1)">class</span>="com.alibaba.druid.pool.DruidDataSource"&gt;
    &lt;!-- 基本属性 url、user、password --&gt;  
    &lt;property name="driverClassName" value="${jdbc.driverClassName}" /&gt;  
    &lt;property name="url" value="${jdbc.url}" /&gt;  
    &lt;property name="username" value="${jdbc.username}" /&gt;  
    &lt;property name="password" value="${jdbc.password}" /&gt;  
    &lt;property name="initialSize" value="${jdbc.initialSize}" /&gt;  
    &lt;property name="minIdle" value="${jdbc.minIdle}" /&gt;   
    &lt;property name="maxActive" value="${jdbc.maxActive}" /&gt;  
    &lt;property name="maxWait" value="${jdbc.maxWait}" /&gt;
    &lt;!-- 超过时间限制是否回收 --&gt;
    &lt;property name="removeAbandoned" value="${jdbc.removeAbandoned}" /&gt;
    &lt;!-- 超过时间限制多长; --&gt;
    &lt;property name="removeAbandonedTimeout" value="${jdbc.removeAbandonedTimeout}" /&gt;
    &lt;!-- 配置间隔多久才进行一次检测,检测需要关闭的空闲连接,单位是毫秒 --&gt;
    &lt;property name="timeBetweenEvictionRunsMillis" value="${jdbc.timeBetweenEvictionRunsMillis}" /&gt;
    &lt;!-- 配置一个连接在池中最小生存的时间,单位是毫秒 --&gt;
    &lt;property name="minEvictableIdleTimeMillis" value="${jdbc.minEvictableIdleTimeMillis}" /&gt;
    &lt;!-- 用来检测连接是否有效的sql,要求是一个查询语句--&gt;
    &lt;property name="validationQuery" value="${jdbc.validationQuery}" /&gt;
    &lt;!-- 申请连接的时候检测 --&gt;
    &lt;property name="testWhileIdle" value="${jdbc.testWhileIdle}" /&gt;
    &lt;!-- 申请连接时执行validationQuery检测连接是否有效,配置为true会降低性能 --&gt;
    &lt;property name="testOnBorrow" value="${jdbc.testOnBorrow}" /&gt;
    &lt;!-- 归还连接时执行validationQuery检测连接是否有效,配置为true会降低性能  --&gt;
    &lt;property name="testOnReturn" value="${jdbc.testOnReturn}" /&gt;
&lt;/bean&gt;

&lt;!-- slave数据源 --&gt;
&lt;bean id="slaveDataSource" <span style="color: rgba(0, 0, 255, 1)">class</span>="com.alibaba.druid.pool.DruidDataSource"&gt;
    &lt;property name="driverClassName" value="${slave.jdbc.driverClassName}" /&gt;  
    &lt;property name="url" value="${slave.jdbc.url}" /&gt;  
    &lt;property name="username" value="${slave.jdbc.username}" /&gt;  
    &lt;property name="password" value="${slave.jdbc.password}" /&gt;  
    &lt;property name="initialSize" value="${slave.jdbc.initialSize}" /&gt;  
    &lt;property name="minIdle" value="${slave.jdbc.minIdle}" /&gt;   
    &lt;property name="maxActive" value="${slave.jdbc.maxActive}" /&gt;  
    &lt;property name="maxWait" value="${slave.jdbc.maxWait}" /&gt;
    &lt;property name="removeAbandoned" value="${slave.jdbc.removeAbandoned}" /&gt;
    &lt;property name="removeAbandonedTimeout" value="${slave.jdbc.removeAbandonedTimeout}" /&gt;
    &lt;property name="timeBetweenEvictionRunsMillis" value="${slave.jdbc.timeBetweenEvictionRunsMillis}" /&gt;
    &lt;property name="minEvictableIdleTimeMillis" value="${slave.jdbc.minEvictableIdleTimeMillis}" /&gt;
    &lt;property name="validationQuery" value="${slave.jdbc.validationQuery}" /&gt;
    &lt;property name="testWhileIdle" value="${slave.jdbc.testWhileIdle}" /&gt;
    &lt;property name="testOnBorrow" value="${slave.jdbc.testOnBorrow}" /&gt;
    &lt;property name="testOnReturn" value="${slave.jdbc.testOnReturn}" /&gt;
&lt;/bean&gt;

&lt;!-- 动态数据源,根据service接口上的注解来决定取哪个数据源 --&gt;
&lt;bean id="dataSource" <span style="color: rgba(0, 0, 255, 1)">class</span>="com.yzb.util.DynamicDataSource"&gt;  
    &lt;property name="targetDataSources"&gt;      
      &lt;map key-type="java.lang.String"&gt;      
          &lt;!-- write or slave --&gt;    
         &lt;entry key="slave" value-ref="slaveDataSource"/&gt;      
         &lt;!-- read or master   --&gt;  
         &lt;entry key="master" value-ref="masterDataSource"/&gt;      
      &lt;/map&gt;               
    &lt;/property&gt;   
    &lt;property name="defaultTargetDataSource" ref="masterDataSource"/&gt;      
  
&lt;/bean&gt;

&lt;!-- Mybatis文件 --&gt;
&lt;bean id="sqlSessionFactory" <span style="color: rgba(0, 0, 255, 1)">class</span>="org.mybatis.spring.SqlSessionFactoryBean"&gt;
    &lt;property name="configLocation" value="classpath:mybatis-config.xml" /&gt; 
    &lt;property name="dataSource" ref="dataSource" /&gt;
    &lt;!-- 映射文件路径 --&gt;
    &lt;property name="mapperLocations" value="classpath*:dbmappers/*.xml" /&gt;
&lt;/bean&gt;

&lt;bean <span style="color: rgba(0, 0, 255, 1)">class</span>="org.mybatis.spring.mapper.MapperScannerConfigurer"&gt;
    &lt;property name="basePackage" value="com.yzb.dao" /&gt;
    &lt;property name="sqlSessionFactoryBeanName" value="sqlSessionFactory" /&gt;
&lt;/bean&gt;

&lt;!-- 事务管理器 --&gt;
&lt;bean id="transactionManager"
    <span style="color: rgba(0, 0, 255, 1)">class</span>="org.springframework.jdbc.datasource.DataSourceTransactionManager"&gt;
    &lt;property name="dataSource" ref="dataSource" /&gt;
&lt;/bean&gt;
&lt;!-- 声明式开启 --&gt;
&lt;tx:annotation-driven transaction-manager="transactionManager" proxy-target-<span style="color: rgba(0, 0, 255, 1)">class</span>="true" order="1"/&gt;

&lt;!-- 为业务逻辑层的方法解析@DataSource注解 &nbsp;为当前线程的HandleDataSource注入数据源 --&gt;&nbsp;   
&lt;bean id="dataSourceAspect" <span style="color: rgba(0, 0, 255, 1)">class</span>="com.yzb.util.DataSourceAspect" /&gt;    
&lt;aop:config proxy-target-<span style="color: rgba(0, 0, 255, 1)">class</span>="true"&gt;    
    &lt;aop:aspect id="dataSourceAspect" ref="dataSourceAspect" order="2"&gt;    
        &lt;aop:pointcut id="tx" expression="execution(* com.yzb.service.impl..*.*(..)) "/&gt;    
        &lt;aop:before pointcut-ref="tx" method="before" /&gt;                
    &lt;/aop:aspect&gt;    
&lt;/aop:config&gt;

</beans>

AOP 实现数据源的动态切换

DataSource.java

package com.yzb.util;

import java.lang.annotation.ElementType;
import java.lang.annotation.Retention;
import java.lang.annotation.RetentionPolicy;
import java.lang.annotation.Target;

/**

  • RUNTIME
  • 编译器将把注释记录在类文件中,在运行时 VM 将保留注释,因此可以反射性地读取。

*/
@Retention(RetentionPolicy.RUNTIME)
@Target(ElementType.METHOD)
public @interface DataSource
{
String value();
}

DataSourceAspect.java

package com.yzb.util;

import java.lang.reflect.Method;

import org.aspectj.lang.JoinPoint;
import org.aspectj.lang.reflect.MethodSignature;

public class DataSourceAspect
{
/**
* 在 dao 层方法获取 datasource 对象之前,在切面中指定当前线程数据源
*/
public void before(JoinPoint point)
{

    Object target </span>=<span style="color: rgba(0, 0, 0, 1)"> point.getTarget();
    String method </span>=<span style="color: rgba(0, 0, 0, 1)"> point.getSignature().getName();
    Class</span>&lt;?&gt;[] classz = target.getClass().getInterfaces();                        <span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 获取目标类的接口, 所以@DataSource需要写在接口上</span>
    Class&lt;?&gt;[] parameterTypes =<span style="color: rgba(0, 0, 0, 1)"> ((MethodSignature) point.getSignature())
            .getMethod().getParameterTypes();
    </span><span style="color: rgba(0, 0, 255, 1)">try</span><span style="color: rgba(0, 0, 0, 1)">
    {
        Method m </span>= classz[0<span style="color: rgba(0, 0, 0, 1)">].getMethod(method, parameterTypes);
        </span><span style="color: rgba(0, 0, 255, 1)">if</span> (m != <span style="color: rgba(0, 0, 255, 1)">null</span> &amp;&amp; m.isAnnotationPresent(DataSource.<span style="color: rgba(0, 0, 255, 1)">class</span><span style="color: rgba(0, 0, 0, 1)">))
        {
            DataSource data </span>= m.getAnnotation(DataSource.<span style="color: rgba(0, 0, 255, 1)">class</span><span style="color: rgba(0, 0, 0, 1)">);
            System.out.println(</span>"用户选择数据库库类型:" +<span style="color: rgba(0, 0, 0, 1)"> data.value());
            HandleDataSource.putDataSource(data.value());                        </span><span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 数据源放到当前线程中</span>

}

    } </span><span style="color: rgba(0, 0, 255, 1)">catch</span><span style="color: rgba(0, 0, 0, 1)"> (Exception e)
    {
        e.printStackTrace();
    }
}
}</span></pre>

DynamicDataSource.java

package com.yzb.util;

import org.springframework.jdbc.datasource.lookup.AbstractRoutingDataSource;

public class DynamicDataSource extends AbstractRoutingDataSource
{

</span><span style="color: rgba(0, 128, 0, 1)">/**</span><span style="color: rgba(0, 128, 0, 1)">
 * 获取与数据源相关的key 此key是Map&lt;String,DataSource&gt; resolvedDataSources 中与数据源绑定的key值
 * 在通过determineTargetDataSource获取目标数据源时使用
 </span><span style="color: rgba(0, 128, 0, 1)">*/</span><span style="color: rgba(0, 0, 0, 1)">
@Override
</span><span style="color: rgba(0, 0, 255, 1)">protected</span><span style="color: rgba(0, 0, 0, 1)"> Object determineCurrentLookupKey()
{
    </span><span style="color: rgba(0, 0, 255, 1)">return</span><span style="color: rgba(0, 0, 0, 1)"> HandleDataSource.getDataSource();
}

}

HandleDataSource.java

package com.yzb.util;

public class HandleDataSource
{
public static final ThreadLocal<String> holder = new ThreadLocal<String>();

</span><span style="color: rgba(0, 128, 0, 1)">/**</span><span style="color: rgba(0, 128, 0, 1)">
 * 绑定当前线程数据源
 * 
 * </span><span style="color: rgba(128, 128, 128, 1)">@param</span><span style="color: rgba(0, 128, 0, 1)"> key
 </span><span style="color: rgba(0, 128, 0, 1)">*/</span>
<span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">static</span> <span style="color: rgba(0, 0, 255, 1)">void</span><span style="color: rgba(0, 0, 0, 1)"> putDataSource(String datasource)
{
    holder.set(datasource);
}

</span><span style="color: rgba(0, 128, 0, 1)">/**</span><span style="color: rgba(0, 128, 0, 1)">
 * 获取当前线程的数据源
 * 
 * </span><span style="color: rgba(128, 128, 128, 1)">@return</span>
 <span style="color: rgba(0, 128, 0, 1)">*/</span>
<span style="color: rgba(0, 0, 255, 1)">public</span> <span style="color: rgba(0, 0, 255, 1)">static</span><span style="color: rgba(0, 0, 0, 1)"> String getDataSource()
{
    </span><span style="color: rgba(0, 0, 255, 1)">return</span><span style="color: rgba(0, 0, 0, 1)"> holder.get();
}

}

service 接口上应用 @DataSource 实现数据源的指定

package com.yzb.service;

import java.util.List;

import com.yzb.model.Person;
import com.yzb.util.DataSource;

public interface IPersonService {

</span><span style="color: rgba(0, 128, 0, 1)">/**</span><span style="color: rgba(0, 128, 0, 1)">
 * 加载全部的person
 * </span><span style="color: rgba(128, 128, 128, 1)">@return</span>
 <span style="color: rgba(0, 128, 0, 1)">*/</span><span style="color: rgba(0, 0, 0, 1)">
List</span>&lt;Person&gt;<span style="color: rgba(0, 0, 0, 1)"> listAllPerson();

</span><span style="color: rgba(0, 128, 0, 1)">/**</span><span style="color: rgba(0, 128, 0, 1)">
 * 查询某个人的信息
 * </span><span style="color: rgba(128, 128, 128, 1)">@param</span><span style="color: rgba(0, 128, 0, 1)"> personId
 * </span><span style="color: rgba(128, 128, 128, 1)">@return</span>
 <span style="color: rgba(0, 128, 0, 1)">*/</span><span style="color: rgba(0, 0, 0, 1)">
@DataSource(</span>"slave")            <span style="color: rgba(0, 128, 0, 1)">//</span><span style="color: rgba(0, 128, 0, 1)"> 指定使用从数据源</span>
Person getPerson(<span style="color: rgba(0, 0, 255, 1)">int</span><span style="color: rgba(0, 0, 0, 1)"> personId);

</span><span style="color: rgba(0, 0, 255, 1)">boolean</span><span style="color: rgba(0, 0, 0, 1)"> updatePerson(Person person);

}

注意点

  测试的时候,怎么样知道读取的是从数据库了? 我们可以修改从数据库中查询到的那条记录的某个字段的值,以区分主、从数据库;

       事务需要注意,尽量保证在一个数据源上进行事务;

       当某个 service 上有多个 aop 时,需要注意 aop 织入的顺序问题,利用 order 关键字控制好织入顺序;

  项目完整工程github 地址:https://github.com/youzhibing/maven-ssm-web,

  工程中实现了 redis 缓存,不去访问:http://localhost:8080/maven-ssm-web/personController/showPerson 是没有问题的, 当然你可以 redis 服务搭建起来并集成进来;

  测试 url:http://localhost:8080/maven-ssm-web/personController/person?personId=1

参考

  《大型网站技术架构 _ 核心原理与案例分析》

  Spring+MyBatis 实现数据库读写分离方案