前言
本篇文章主要講述的是SpringBoot整合Mybatis、Druid和PageHelper 并實(shí)現(xiàn)多數(shù)據(jù)源和分頁货岭。其中SpringBoot整合Mybatis這塊路操,這里就不過多說明了。重點(diǎn)是講述在多數(shù)據(jù)源下的如何配置使用Druid和PageHelper 千贯。
Druid介紹和使用
在使用Druid之前屯仗,先來簡單的了解下Druid。
Druid是一個(gè)數(shù)據(jù)庫連接池搔谴。Druid可以說是目前最好的數(shù)據(jù)庫連接池魁袜!因其優(yōu)秀的功能、性能和擴(kuò)展性方面,深受開發(fā)人員的青睞峰弹。
Druid已經(jīng)在阿里巴巴部署了超過600個(gè)應(yīng)用店量,經(jīng)過一年多生產(chǎn)環(huán)境大規(guī)模部署的嚴(yán)苛考驗(yàn)。Druid是阿里巴巴開發(fā)的號(hào)稱為監(jiān)控而生的數(shù)據(jù)庫連接池鞠呈!
同時(shí)Druid不僅僅是一個(gè)數(shù)據(jù)庫連接池融师,Druid 核心主要包括三部分:
基于Filter-Chain模式的插件體系。
DruidDataSource 高效可管理的數(shù)據(jù)庫連接池粟按。
SQLParser
Druid的主要功能如下:
是一個(gè)高效诬滩、功能強(qiáng)大霹粥、可擴(kuò)展性好的數(shù)據(jù)庫連接池灭将。
可以監(jiān)控?cái)?shù)據(jù)庫訪問性能。
數(shù)據(jù)庫密碼加密
獲得SQL執(zhí)行日志
擴(kuò)展JDBC
介紹方面這塊就不再多說后控,具體的可以看官方文檔庙曙。那么開始介紹Druid如何使用。
首先是Maven依賴浩淘,只需要添加druid這一個(gè)jar就行了捌朴。
<dependency> <groupId>com.alibaba</groupId> <artifactId>druid</artifactId> <version>1.1.8</version> </dependency>
配置方面,主要的只需要在application.properties或application.yml添加如下就可以了张抄。
說明:因?yàn)檫@里我是用來兩個(gè)數(shù)據(jù)源砂蔽,所以稍微有些不同而已。Druid 配置的說明在下面中已經(jīng)說的很詳細(xì)了署惯,這里我就不在說明了左驾。
## 默認(rèn)的數(shù)據(jù)源master.datasource.url=jdbc:mysql://localhost:3306/springBoot?useUnicode=true&characterEncoding=utf8&allowMultiQueries=truemaster.datasource.username=rootmaster.datasource.password=123456master.datasource.driverClassName=com.mysql.jdbc.Driver## 另一個(gè)的數(shù)據(jù)源cluster.datasource.url=jdbc:mysql://localhost:3306/springBoot_test?useUnicode=true&characterEncoding=utf8cluster.datasource.username=rootcluster.datasource.password=123456cluster.datasource.driverClassName=com.mysql.jdbc.Driver# 連接池的配置信息 # 初始化大小,最小极谊,最大 spring.datasource.type=com.alibaba.druid.pool.DruidDataSourcespring.datasource.initialSize=5 spring.datasource.minIdle=5 spring.datasource.maxActive=20 # 配置獲取連接等待超時(shí)的時(shí)間 spring.datasource.maxWait=60000 # 配置間隔多久才進(jìn)行一次檢測诡右,檢測需要關(guān)閉的空閑連接,單位是毫秒 spring.datasource.timeBetweenEvictionRunsMillis=60000 # 配置一個(gè)連接在池中最小生存的時(shí)間轻猖,單位是毫秒 spring.datasource.minEvictableIdleTimeMillis=300000 spring.datasource.validationQuery=SELECT 1 FROM DUAL spring.datasource.testWhileIdle=true spring.datasource.testOnBorrow=false spring.datasource.testOnReturn=false # 打開PSCache帆吻,并且指定每個(gè)連接上PSCache的大小 spring.datasource.poolPreparedStatements=true spring.datasource.maxPoolPreparedStatementPerConnectionSize=20 # 配置監(jiān)控統(tǒng)計(jì)攔截的filters,去掉后監(jiān)控界面sql無法統(tǒng)計(jì)咙边,'wall'用于防火墻 spring.datasource.filters=stat,wall,log4j # 通過connectProperties屬性來打開mergeSql功能猜煮;慢SQL記錄 spring.datasource.connectionProperties=druid.stat.mergeSql=true;druid.stat.slowSqlMillis=5000
成功添加了配置文件之后,我們再來編寫Druid相關(guān)的類败许。
首先是MasterDataSourceConfig.java這個(gè)類王带,這個(gè)是默認(rèn)的數(shù)據(jù)源配置類。
@Configuration@MapperScan(basePackages = MasterDataSourceConfig.PACKAGE, sqlSessionFactoryRef = "masterSqlSessionFactory")public class MasterDataSourceConfig { static final String PACKAGE = "com.pancm.dao.master"; static final String MAPPER_LOCATION = "classpath:mapper/master/*.xml"; @Value("${master.datasource.url}") private String url; @Value("${master.datasource.username}") private String username; @Value("${master.datasource.password}") private String password; @Value("${master.datasource.driverClassName}") private String driverClassName; @Value("${spring.datasource.initialSize}") private int initialSize; @Value("${spring.datasource.minIdle}") private int minIdle; @Value("${spring.datasource.maxActive}") private int maxActive; @Value("${spring.datasource.maxWait}") private int maxWait; @Value("${spring.datasource.timeBetweenEvictionRunsMillis}") private int timeBetweenEvictionRunsMillis; @Value("${spring.datasource.minEvictableIdleTimeMillis}") private int minEvictableIdleTimeMillis; @Value("${spring.datasource.validationQuery}") private String validationQuery; @Value("${spring.datasource.testWhileIdle}") private boolean testWhileIdle; @Value("${spring.datasource.testOnBorrow}") private boolean testOnBorrow; @Value("${spring.datasource.testOnReturn}") private boolean testOnReturn; @Value("${spring.datasource.poolPreparedStatements}") private boolean poolPreparedStatements; @Value("${spring.datasource.maxPoolPreparedStatementPerConnectionSize}") private int maxPoolPreparedStatementPerConnectionSize; @Value("${spring.datasource.filters}") private String filters; @Value("{spring.datasource.connectionProperties}") private String connectionProperties; @Bean(name = "masterDataSource") @Primary public DataSource masterDataSource() { DruidDataSource dataSource = new DruidDataSource(); dataSource.setUrl(url); dataSource.setUsername(username); dataSource.setPassword(password); dataSource.setDriverClassName(driverClassName); //具體配置 dataSource.setInitialSize(initialSize); dataSource.setMinIdle(minIdle); dataSource.setMaxActive(maxActive); dataSource.setMaxWait(maxWait); dataSource.setTimeBetweenEvictionRunsMillis(timeBetweenEvictionRunsMillis); dataSource.setMinEvictableIdleTimeMillis(minEvictableIdleTimeMillis); dataSource.setValidationQuery(validationQuery); dataSource.setTestWhileIdle(testWhileIdle); dataSource.setTestOnBorrow(testOnBorrow); dataSource.setTestOnReturn(testOnReturn); dataSource.setPoolPreparedStatements(poolPreparedStatements); dataSource.setMaxPoolPreparedStatementPerConnectionSize(maxPoolPreparedStatementPerConnectionSize); try { dataSource.setFilters(filters); } catch (SQLException e) { e.printStackTrace(); } dataSource.setConnectionProperties(connectionProperties); return dataSource; } @Bean(name = "masterTransactionManager") @Primary public DataSourceTransactionManager masterTransactionManager() { return new DataSourceTransactionManager(masterDataSource()); } @Bean(name = "masterSqlSessionFactory") @Primary public SqlSessionFactory masterSqlSessionFactory(@Qualifier("masterDataSource") DataSource masterDataSource) throws Exception { final SqlSessionFactoryBean sessionFactory = new SqlSessionFactoryBean(); sessionFactory.setDataSource(masterDataSource); sessionFactory.setMapperLocations(new PathMatchingResourcePatternResolver() .getResources(MasterDataSourceConfig.MAPPER_LOCATION)); return sessionFactory.getObject(); }}
其中這兩個(gè)注解說明下:
@Primary :標(biāo)志這個(gè) Bean 如果在多個(gè)同類 Bean 候選時(shí)檐束,該 Bean
優(yōu)先被考慮辫秧。多數(shù)據(jù)源配置的時(shí)候注意,必須要有一個(gè)主數(shù)據(jù)源被丧,用 @Primary 標(biāo)志該 Bean盟戏。@MapperScan: 掃描 Mapper 接口并容器管理绪妹。
需要注意的是sqlSessionFactoryRef 表示定義一個(gè)唯一 SqlSessionFactory 實(shí)例。
上面的配置完之后柿究,就可以將Druid作為連接池使用了邮旷。但是Druid并不簡簡單單的是個(gè)連接池,它也可以說是一個(gè)監(jiān)控應(yīng)用蝇摸,它自帶了web監(jiān)控界面婶肩,可以很清晰的看到SQL相關(guān)信息。
在SpringBoot中運(yùn)用Druid的監(jiān)控作用貌夕,只需要編寫StatViewServlet和WebStatFilter類律歼,實(shí)現(xiàn)注冊服務(wù)和過濾規(guī)則。這里我們可以將這兩個(gè)寫在一起啡专,使用@Configuration和@Bean险毁。
為了方便理解,相關(guān)的配置說明也寫在代碼中了们童,這里就不再過多贅述了畔况。
代碼如下:
@Configurationpublic class DruidConfiguration { @Bean public ServletRegistrationBean druidStatViewServle() { //注冊服務(wù) ServletRegistrationBean servletRegistrationBean = new ServletRegistrationBean( new StatViewServlet(), "/druid/*"); // 白名單(為空表示,所有的都可以訪問,多個(gè)IP的時(shí)候用逗號(hào)隔開) servletRegistrationBean.addInitParameter("allow", "127.0.0.1"); // IP黑名單 (存在共同時(shí),deny優(yōu)先于allow) servletRegistrationBean.addInitParameter("deny", "127.0.0.2"); // 設(shè)置登錄的用戶名和密碼 servletRegistrationBean.addInitParameter("loginUsername", "pancm"); servletRegistrationBean.addInitParameter("loginPassword", "123456"); // 是否能夠重置數(shù)據(jù). servletRegistrationBean.addInitParameter("resetEnable", "false"); return servletRegistrationBean; } @Bean public FilterRegistrationBean druidStatFilter() { FilterRegistrationBean filterRegistrationBean = new FilterRegistrationBean( new WebStatFilter()); // 添加過濾規(guī)則 filterRegistrationBean.addUrlPatterns("/*"); // 添加不需要忽略的格式信息 filterRegistrationBean.addInitParameter("exclusions", "*.js,*.gif,*.jpg,*.png,*.css,*.ico,/druid/*"); System.out.println("druid初始化成功!"); return filterRegistrationBean; }}
編寫完之后慧库,啟動(dòng)程序跷跪,在瀏覽器輸入:http://127.0.0.1:8084/druid/index.html ,然后輸入設(shè)置的用戶名和密碼齐板,便可以訪問Web界面了吵瞻。
多數(shù)據(jù)源配置
在進(jìn)行多數(shù)據(jù)源配置之前,先分別在springBoot和springBoot_test的mysql數(shù)據(jù)庫中執(zhí)行如下腳本覆积。
-- springBoot庫的腳本CREATE TABLE `t_user` ( `id` int(11) NOT NULL AUTO_INCREMENT COMMENT '自增id', `name` varchar(10) DEFAULT NULL COMMENT '姓名', `age` int(2) DEFAULT NULL COMMENT '年齡', PRIMARY KEY (`id`)) ENGINE=InnoDB AUTO_INCREMENT=15 DEFAULT CHARSET=utf8-- springBoot_test庫的腳本CREATE TABLE `t_student` ( `id` int(11) NOT NULL AUTO_INCREMENT, `name` varchar(16) DEFAULT NULL, `age` int(11) DEFAULT NULL, PRIMARY KEY (`id`)) ENGINE=InnoDB AUTO_INCREMENT=2 DEFAULT CHARSET=utf8
注:為了偷懶听皿,將兩張表的結(jié)構(gòu)弄成一樣了!不過不影響測試!
在application.properties中已經(jīng)配置這兩個(gè)數(shù)據(jù)源的信息宽档,上面已經(jīng)貼出了一次配置尉姨,這里就不再貼了。
這里重點(diǎn)說下 第二個(gè)數(shù)據(jù)源的配置吗冤。和上面的MasterDataSourceConfig.java差不多又厉,區(qū)別在與沒有使用@Primary 注解和名稱不同而已。需要注意的是MasterDataSourceConfig.java對package和mapper的掃描是精確到目錄的椎瘟,這里的第二個(gè)數(shù)據(jù)源也是如此覆致。
那么代碼如下:
@Configuration@MapperScan(basePackages = ClusterDataSourceConfig.PACKAGE, sqlSessionFactoryRef = "clusterSqlSessionFactory")public class ClusterDataSourceConfig { static final String PACKAGE = "com.pancm.dao.cluster"; static final String MAPPER_LOCATION = "classpath:mapper/cluster/*.xml"; @Value("${cluster.datasource.url}") private String url; @Value("${cluster.datasource.username}") private String username; @Value("${cluster.datasource.password}") private String password; @Value("${cluster.datasource.driverClassName}") private String driverClass; // 和MasterDataSourceConfig一樣,這里略 @Bean(name = "clusterDataSource") public DataSource clusterDataSource() { DruidDataSource dataSource = new DruidDataSource(); dataSource.setUrl(url); dataSource.setUsername(username); dataSource.setPassword(password); dataSource.setDriverClassName(driverClass); // 和MasterDataSourceConfig一樣肺蔚,這里略 ... return dataSource; } @Bean(name = "clusterTransactionManager") public DataSourceTransactionManager clusterTransactionManager() { return new DataSourceTransactionManager(clusterDataSource()); } @Bean(name = "clusterSqlSessionFactory") public SqlSessionFactory clusterSqlSessionFactory(@Qualifier("clusterDataSource") DataSource clusterDataSource) throws Exception { final SqlSessionFactoryBean sessionFactory = new SqlSessionFactoryBean(); sessionFactory.setDataSource(clusterDataSource); sessionFactory.setMapperLocations(new PathMatchingResourcePatternResolver().getResources(ClusterDataSourceConfig.MAPPER_LOCATION)); return sessionFactory.getObject(); }}
成功寫完配置之后煌妈,啟動(dòng)程序,進(jìn)行測試。
分別在springBoot和springBoot_test庫中使用接口進(jìn)行添加數(shù)據(jù)璧诵。
t_user
POST http://localhost:8084/api/user{"name":"張三","age":25}{"name":"李四","age":25}{"name":"王五","age":25}
t_student
POST http://localhost:8084/api/student{"name":"學(xué)生A","age":16}{"name":"學(xué)生B","age":17}{"name":"學(xué)生C","age":18}
成功添加數(shù)據(jù)之后汰蜘,然后進(jìn)行調(diào)用不同的接口進(jìn)行查詢。
請求:
返回:
{ "id": 2, "name": "李四", "age": 25}
請求:
GET http://localhost:8084/api/student?name=學(xué)生C
返回:
{ "id": 1, "name": "學(xué)生C", "age": 16}
通過數(shù)據(jù)可以看出之宿,成功配置了多數(shù)據(jù)源了族操。
PageHelper 分頁實(shí)現(xiàn)
PageHelper是Mybatis的一個(gè)分頁插件,非常的好用比被!這里強(qiáng)烈推薦I选!等缀!
PageHelper的使用很簡單枷莉,只需要在Maven中添加pagehelper這個(gè)依賴就可以了。
Maven的依賴如下:
<dependency> <groupId>com.github.pagehelper</groupId> <artifactId>pagehelper-spring-boot-starter</artifactId> <version>1.2.3</version></dependency>
注:這里我是用springBoot版的项滑!也可以使用其它版本的依沮。
添加依賴之后,只需要添加如下配置或代碼就可以了枪狂。
第一種,在application.properties或application.yml添加
pagehelper: helperDialect: mysql offsetAsPageNum: true rowBoundsWithCount: true reasonable: false
第二種宋渔,在mybatis.xml配置中添加
<bean id="sqlSessionFactory" class="org.mybatis.spring.SqlSessionFactoryBean"> <property name="dataSource" ref="dataSource" /> <!-- 掃描mapping.xml文件 --> <property name="mapperLocations" value="classpath:mapper/*.xml"></property> <!-- 配置分頁插件 --> <property name="plugins"> <array> <bean class="com.github.pagehelper.PageHelper"> <property name="properties"> <value> helperDialect=mysql offsetAsPageNum=true rowBoundsWithCount=true reasonable=false </value> </property> </bean> </array> </property> </bean>
第三種州疾,在代碼中添加,使用@Bean注解在啟動(dòng)程序的時(shí)候初始化皇拣。
@Bean public PageHelper pageHelper(){ PageHelper pageHelper = new PageHelper(); Properties properties = new Properties(); //數(shù)據(jù)庫 properties.setProperty("helperDialect", "mysql"); //是否將參數(shù)offset作為PageNum使用 properties.setProperty("offsetAsPageNum", "true"); //是否進(jìn)行count查詢 properties.setProperty("rowBoundsWithCount", "true"); //是否分頁合理化 properties.setProperty("reasonable", "false"); pageHelper.setProperties(properties); }
因?yàn)檫@里我們使用的是多數(shù)據(jù)源严蓖,所以這里的配置稍微有些不同。我們需要在sessionFactory這里配置氧急。這里就對MasterDataSourceConfig.java進(jìn)行相應(yīng)的修改颗胡。
在masterSqlSessionFactory方法中,添加如下代碼吩坝。
@Bean(name = "masterSqlSessionFactory") @Primary public SqlSessionFactory masterSqlSessionFactory(@Qualifier("masterDataSource") DataSource masterDataSource) throws Exception { final SqlSessionFactoryBean sessionFactory = new SqlSessionFactoryBean(); sessionFactory.setDataSource(masterDataSource); sessionFactory.setMapperLocations(new PathMatchingResourcePatternResolver() .getResources(MasterDataSourceConfig.MAPPER_LOCATION)); //分頁插件 Interceptor interceptor = new PageInterceptor(); Properties properties = new Properties(); //數(shù)據(jù)庫 properties.setProperty("helperDialect", "mysql"); //是否將參數(shù)offset作為PageNum使用 properties.setProperty("offsetAsPageNum", "true"); //是否進(jìn)行count查詢 properties.setProperty("rowBoundsWithCount", "true"); //是否分頁合理化 properties.setProperty("reasonable", "false"); interceptor.setProperties(properties); sessionFactory.setPlugins(new Interceptor[] {interceptor}); return sessionFactory.getObject(); }
注:其它的數(shù)據(jù)源也想進(jìn)行分頁的時(shí)候毒姨,參照上面的代碼即可。
這里需要注意的是reasonable參數(shù)钉寝,表示分頁合理化弧呐,默認(rèn)值為false。如果該參數(shù)設(shè)置為 true 時(shí)嵌纲,pageNum<=0 時(shí)會(huì)查詢第一頁俘枫,pageNum>pages(超過總數(shù)時(shí)),會(huì)查詢最后一頁逮走。默認(rèn)false 時(shí)鸠蚪,直接根據(jù)參數(shù)進(jìn)行查詢。
設(shè)置完P(guān)ageHelper 之后,使用的話茅信,只需要在查詢的sql前面添加PageHelper.startPage(pageNum,pageSize);酣栈,如果是想知道總數(shù)的話,在查詢的sql語句后買呢添加 page.getTotal()就可以了汹押。
代碼示例:
public List<T> findByListEntity(T entity) { List<T> list = null; try { Page<?> page =PageHelper.startPage(1,2); System.out.println(getClassName(entity)+"設(shè)置第一頁兩條數(shù)據(jù)!"); list = getMapper().findByListEntity(entity); System.out.println("總共有:"+page.getTotal()+"條數(shù)據(jù),實(shí)際返回:"+list.size()+"兩條數(shù)據(jù)!"); } catch (Exception e) { logger.error("查詢"+getClassName(entity)+"失敗!原因是:",e); } return list; }
代碼編寫完畢之后矿筝,開始進(jìn)行最后的測試。
查詢t_user表的所有的數(shù)據(jù)棚贾,并進(jìn)行分頁窖维。
請求:
返回:
[ { "id": 1, "name": "張三", "age": 25 }, { "id": 2, "name": "李四", "age": 25 }]
控制臺(tái)打印:
開始查詢...User設(shè)置第一頁兩條數(shù)據(jù)!2018-04-27 19:55:50.769 DEBUG 6152 --- [io-8084-exec-10] c.p.d.m.UserDao.findByListEntity_COUNT : ==> Preparing: SELECT count(0) FROM t_user WHERE 1 = 1 2018-04-27 19:55:50.770 DEBUG 6152 --- [io-8084-exec-10] c.p.d.m.UserDao.findByListEntity_COUNT : ==> Parameters: 2018-04-27 19:55:50.771 DEBUG 6152 --- [io-8084-exec-10] c.p.d.m.UserDao.findByListEntity_COUNT : <== Total: 12018-04-27 19:55:50.772 DEBUG 6152 --- [io-8084-exec-10] c.p.dao.master.UserDao.findByListEntity : ==> Preparing: select id, name, age from t_user where 1=1 LIMIT ? 2018-04-27 19:55:50.773 DEBUG 6152 --- [io-8084-exec-10] c.p.dao.master.UserDao.findByListEntity : ==> Parameters: 2(Integer)2018-04-27 19:55:50.774 DEBUG 6152 --- [io-8084-exec-10] c.p.dao.master.UserDao.findByListEntity : <== Total: 2總共有:3條數(shù)據(jù),實(shí)際返回:2兩條數(shù)據(jù)!
查詢t_student表的所有的數(shù)據(jù),并進(jìn)行分頁妙痹。
請求:
返回:
[ { "id": 1, "name": "學(xué)生A", "age": 16 }, { "id": 2, "name": "學(xué)生B", "age": 17 }]
控制臺(tái)打印:
開始查詢...Studnet設(shè)置第一頁兩條數(shù)據(jù)!2018-04-27 19:54:56.155 DEBUG 6152 --- [nio-8084-exec-8] c.p.d.c.S.findByListEntity_COUNT : ==> Preparing: SELECT count(0) FROM t_student WHERE 1 = 1 2018-04-27 19:54:56.155 DEBUG 6152 --- [nio-8084-exec-8] c.p.d.c.S.findByListEntity_COUNT : ==> Parameters: 2018-04-27 19:54:56.156 DEBUG 6152 --- [nio-8084-exec-8] c.p.d.c.S.findByListEntity_COUNT : <== Total: 12018-04-27 19:54:56.157 DEBUG 6152 --- [nio-8084-exec-8] c.p.d.c.StudentDao.findByListEntity : ==> Preparing: select id, name, age from t_student where 1=1 LIMIT ? 2018-04-27 19:54:56.157 DEBUG 6152 --- [nio-8084-exec-8] c.p.d.c.StudentDao.findByListEntity : ==> Parameters: 2(Integer)2018-04-27 19:54:56.157 DEBUG 6152 --- [nio-8084-exec-8] c.p.d.c.StudentDao.findByListEntity : <== Total: 2總共有:3條數(shù)據(jù),實(shí)際返回:2兩條數(shù)據(jù)!
查詢完畢之后铸史,我們再來看Druid 的監(jiān)控界面。
在瀏覽器輸入:http://127.0.0.1:8084/druid/index.html
可以很清晰的看到操作記錄!
如果想知道更多的Druid相關(guān)知識(shí)怯伊,可以查看官方文檔!
結(jié)語
這篇終于寫完了琳轿,在進(jìn)行代碼編寫的時(shí)候,碰到過很多問題耿芹,然后慢慢的嘗試和找資料解決了崭篡。本篇文章只是很淺的介紹了這些相關(guān)的使用,在實(shí)際的應(yīng)用可能會(huì)更復(fù)雜吧秕。如果有有更好的想法和建議琉闪,歡迎留言進(jìn)行討論!
同時(shí)需要更多java相關(guān)資料以及面試心得和視頻資料的砸彬,歡迎加QQ群:810589193
免費(fèi)獲取Java工程化颠毙、高性能及分布式、高性能砂碉、高架構(gòu)蛀蜜、性能調(diào)優(yōu)、Spring增蹭、MyBatis滴某、Netty源碼分析等多個(gè)知識(shí)點(diǎn)高級進(jìn)階干貨的直播免費(fèi)學(xué)習(xí)權(quán)限及相關(guān)視頻資料,還有spring和虛擬機(jī)等書籍掃描版