• SpringBoot整合Druid数据源


     什么是Druid

    Druid是一个专为大型数据集上的高性能切片和OLAP分析而设计的数据存储。Druid最常用作为GUI分析应用程序提供动力的数据存储,或者用作需要快速聚合的高度并发API的后端。Druid的常见应用领域包括:

    • 点击流分析
    • 网络流量分析
    • 服务器指标存储
    • 应用性能指标
    • 数字营销分析
    • 商业智能/OLAP

     Druid数据源简介

    Java程序很大一部分要操作数据库,为了提高性能操作数据库的时候,又不得不使用数据库连接池。

    ♦ Druid 是阿里巴巴开源平台上一个数据库连接池实现,结合了 C3P0、DBCP 等 DB 池的优点,同时加入了日志监控。

    ♦ Druid可很好的监控DB池连接和 SQL执行情况,天生就是针对监控而生的 DB 连接池

    ♦ Druid已在阿里巴巴部署超过600个应用,经过一年多生产环境大规模部署的严苛考验。

    Spring Boot 2.0 以上默认使用 Hikari 数据源,Hikari 与 Driud 都是当前 Java Web 上最优秀的数据源,重点介绍 Spring Boot 如何集成 Druid 数据源,如何实现数据库监控。

    Github地址:Druid源码文档

    相关参数如下

    属性说明缺省值
    name配置这个属性的意义在于,如果存在多个数据源,监控的时候可以通过名字来区分开来。如果没有配置,将会生成一个名字,格式是:"DataSource-" + System.identityHashCode(this).
    url数据库的jdbc连接地址。一般为连接oracle/mysql。示例如下:
    username连接数据库的用户名
    password连接数据库的密码。如果你不希望密码直接写在配置文件中, 
    可以使用ConfigFilter
    driverClassName根据url自动识别这一项可配可不配,如果不配置druid会根据url自动识别dbType,然后选择相应的driverClassName
    initialSize0初始化时建立物理连接的个数。初始化发生在显示调用init方法,或者第一次getConnection时
    maxActive8最大连接池数量
    maxIdle8已经不再使用,配置了也没效果
    minIdle最小连接池数量
    maxWait获取连接时最大等待时间,单位毫秒。配置了maxWait之后, 
    缺省启用公平锁,并发效率会有所下降, 
    如果需要可以通过配置useUnfairLock属性为true使用非公平锁。
    poolPreparedStatementsfalse是否缓存preparedStatement,也就是PSCache。 
    PSCache对支持游标的数据库性能提升巨大,比如说oracle。 
    在mysql5.5以下的版本中没有PSCache功能,建议关闭掉。
    作者在5.5版本中使用PSCache,通过监控界面发现PSCache有缓存命中率记录, 
    该应该是支持PSCache。
    maxOpenPreparedStatements-1要启用PSCache,必须配置大于0,当大于0时, 
    poolPreparedStatements自动触发修改为true。 
    在Druid中,不会存在Oracle下PSCache占用内存过多的问题, 
    可以把这个数值配置大一些,比如说100
    validationQuery用来检测连接是否有效的sql,要求是一个查询语句。 
    如果validationQuery为null,testOnBorrow、testOnReturn、 
    testWhileIdle都不会其作用。
    validationQueryTimeOut单位:秒,检测连接是否有效的超时时间。底层调用jdbcStatement对象的void setQueryTimeout(int seconds)方法
    testOnBorrowtrue申请连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能。
    testOnReturnfalse归还连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能
    testWhileIdlefalse建议配置为true,不影响性能,并且保证安全性。 
    申请连接的时候检测,如果空闲时间大于 
    timeBetweenEvictionRunsMillis, 
    执行validationQuery检测连接是否有效。
    timeBetweenEvictionRunsMillis有两个含义: 
    1) Destroy线程会检测连接的间隔时间 
    2) testWhileIdle的判断依据,详细看testWhileIdle属性的说明
    numTestsPerEvictionRun不再使用,一个DruidDataSource只支持一个EvictionRun
    minEvictableIdleTimeMillis
    connectionInitSqls物理连接初始化的时候执行的sql
    exceptionSorter根据dbType自动识别当数据库抛出一些不可恢复的异常时,抛弃连接
    filters属性类型是字符串,通过别名的方式配置扩展插件, 
    常用的插件有: 
    监控统计用的filter:stat  
    日志用的filter:log4j 
    防御sql注入的filter:wall
    proxyFilters类型是List, 
    如果同时配置了filters和proxyFilters, 
    是组合关系,并非替换关系

    配置Druid数据源

    1. 添加上 Druid 数据源依赖。

    1. <dependency>
    2. <groupId>com.alibabagroupId>
    3. <artifactId>druidartifactId>
    4. <version>1.2.9version>
    5. dependency>

    2、切换数据源;之前已经说过 Spring Boot 2.0 以上默认使用 HikariDataSource 数据源,但可以 通过 spring.datasource.type 指定数据源。

    1. spring:
    2. datasource:
    3. password: 123456
    4. username: root
    5. url: jdbc:mysql://localhost:3306/mybatis?useUnicode=true;characterEncoding=UTF-8
    6. driver-class-name: com.mysql.cj.jdbc.Driver
    7. type: com.alibaba.druid.pool.DruidDataSource # 自定义数据源

    3、数据源切换之后,在测试类中注入 DataSource,然后获取到它,输出一看便知是否成功切换;

     4、切换成功!既然切换成功,就可以设置数据源连接初始化大小、最大连接数、等待时间、最小连接数 等设置项;可以查看源码

    1. spring:
    2. datasource:
    3. password: 123456
    4. username: root
    5. url: jdbc:mysql://localhost:3306/mybatis?useUnicode=true;characterEncoding=UTF-8
    6. driver-class-name: com.mysql.cj.jdbc.Driver
    7. type: com.alibaba.druid.pool.DruidDataSource # 自定义数据源
    8. #Spring Boot 默认是不注入这些属性值的,需要自己绑定
    9. #druid 数据源专有配置
    10. initialSize: 5 # 初始化连接数
    11. minIdle: 5 # 最小连接池数量
    12. maxActive: 20 # 最大连接池数量
    13. maxWait: 60000 # 获取连接的最大等待时间(毫秒)
    14. timeBetweenEvictionRunsMillis: 60000
    15. minEvictableIdleTimeMillis: 300000
    16. validationQuery: SELECT 1 FROM DUAL
    17. testWhileIdle: true
    18. testOnBorrow: false
    19. testOnReturn: false
    20. poolPreparedStatements: true
    21. #配置监控统计拦截的filters,stat:监控统计、log4j:日志记录、wall:防御sql注入
    22. #如果允许时报错 java.lang.ClassNotFoundException: org.apache.log4j.Priority
    23. #则导入 log4j 依赖即可,Maven 地址:https://mvnrepository.com/artifact/log4j/log4j
    24. filters: stat,wall,log4j
    25. maxPoolPreparedStatementPerConnectionSize: 20
    26. useGlobalDataSourceStat: true
    27. connectionProperties: druid.stat.mergeSql=true;druid.stat.slowSqlMillis=500

    5. 导入log4j,因为它本身有日志监控功能,不导入会报错

    1. <dependency>
    2. <groupId>log4jgroupId>
    3. <artifactId>log4jartifactId>
    4. <version>1.2.17version>
    5. dependency>

    6、现在需要程序员自己为 DruidDataSource 绑定全局配置文件中的参数,再添加到容器中,而不再使用 Spring Boot 的自动生成了;需自己添加 DruidDataSource 组件到容器中,并绑定属性;

    1. import com.alibaba.druid.pool.DruidDataSource;
    2. import org.springframework.boot.context.properties.ConfigurationProperties;
    3. import org.springframework.context.annotation.Bean;
    4. import org.springframework.context.annotation.Configuration;
    5. @Configuration
    6. public class DruidConfig {
    7. /*
    8. 将自定义的 Druid数据源添加到容器中,不再让 Spring Boot 自动创建
    9. 绑定application.yml全局配置文件中的druid数据源属性到com.alibaba.druid.pool.DruidDataSource从而让它们生效
    10. @ConfigurationProperties(prefix = "spring.datasource"):作用就是将application.yml全局配置文件中
    11. 前缀为 spring.datasource的属性值注入到 com.alibaba.druid.pool.DruidDataSource 的同名参数中
    12. */
    13. @ConfigurationProperties(prefix = "spring.datasource")
    14. @Bean
    15. public DruidDataSource getDruidDataSource(){
    16. return new DruidDataSource();
    17. }
    18. }

    7.绑定之后,去测试类中进行测试

    配置Druid数据源监控

    Druid 数据源具有监控的功能,并提供了一个 web 界面方便用户查看,类似安装 路由器 时,人家也提供了一个默认的 web 页面。

    1. 第一步需要设置 Druid 的后台管理页面,比如 登录账号、密码 等;配置后台管理;

    1. import com.alibaba.druid.pool.DruidDataSource;
    2. import com.alibaba.druid.support.http.StatViewServlet;
    3. import org.springframework.boot.context.properties.ConfigurationProperties;
    4. import org.springframework.boot.web.servlet.ServletRegistrationBean;
    5. import org.springframework.context.annotation.Bean;
    6. import org.springframework.context.annotation.Configuration;
    7. import java.util.HashMap;
    8. import java.util.Map;
    9. @Configuration
    10. public class DruidConfig {
    11. /*
    12. 将自定义的 Druid数据源添加到容器中,不再让 Spring Boot 自动创建
    13. 绑定application.yml全局配置文件中的druid数据源属性到com.alibaba.druid.pool.DruidDataSource从而让它们生效
    14. @ConfigurationProperties(prefix = "spring.datasource"):作用就是将application.yml全局配置文件中
    15. 前缀为 spring.datasource的属性值注入到 com.alibaba.druid.pool.DruidDataSource 的同名参数中
    16. */
    17. @ConfigurationProperties(prefix = "spring.datasource")
    18. @Bean
    19. public DruidDataSource getDruidDataSource(){
    20. return new DruidDataSource();
    21. }
    22. //配置 Druid 监控管理后台的Servlet;
    23. //内置 Servlet 容器时没有web.xml文件,所以使用 Spring Boot 的注册 Servlet 方式
    24. @Bean
    25. public ServletRegistrationBean statViewServlet() {
    26. // 只要访问druid下面的路径,都会进入到druid的监控页面(监控页面人家写好的,可以直接拿来用)
    27. ServletRegistrationBean bean = new ServletRegistrationBean(new StatViewServlet(), "/druid/*");
    28. // 这些参数可以在 com.alibaba.druid.support.http.StatViewServlet
    29. // 的父类 com.alibaba.druid.support.http.ResourceServlet 中找到
    30. Map initParams = new HashMap<>();
    31. // loginUsername、loginPassword两个key是固定写法
    32. initParams.put("loginUsername", "admin"); //后台管理界面的登录账号
    33. initParams.put("loginPassword", "123456"); //后台管理界面的登录密码
    34. //后台允许谁可以访问
    35. //initParams.put("allow", "localhost"):表示只有本机可以访问
    36. //initParams.put("allow", ""):为空或者为null时,表示允许所有访问
    37. initParams.put("allow", "");
    38. // 禁止谁访问
    39. //initParams.put("kuangshen", "192.168.1.20");表示禁止此ip访问
    40. //设置初始化参数
    41. bean.setInitParameters(initParams);
    42. return bean;
    43. }
    44. }

    initParams里设置的属性,可以在StatViewServlet类的父类中找到其设置的key属性名称

    2. 配置完毕后重启项目,我们可以访问 :http://localhost:8080/druid ,会默认进入到监控登录页

    账号密码就是我们上述配置的 admin,123456,其他账号会进不去

    首页就是Druid的基本信息,包括其他tab有效信息

     比如我们现在访问整合JDBC中写的,查询所有用户方法:http://localhost:8080/userList

     再切换到druid的监控页,进入SQL监控tab栏目中,查看刚刚执行的sql语句信息

    包括执行的数据源相关信息等等

    配置 Druid web 监控 filter 过滤器

    1. import com.alibaba.druid.pool.DruidDataSource;
    2. import com.alibaba.druid.support.http.StatViewServlet;
    3. import com.alibaba.druid.support.http.WebStatFilter;
    4. import org.springframework.boot.context.properties.ConfigurationProperties;
    5. import org.springframework.boot.web.servlet.FilterRegistrationBean;
    6. import org.springframework.boot.web.servlet.ServletRegistrationBean;
    7. import org.springframework.context.annotation.Bean;
    8. import org.springframework.context.annotation.Configuration;
    9. import java.util.Arrays;
    10. import java.util.HashMap;
    11. import java.util.Map;
    12. @Configuration
    13. public class DruidConfig {
    14. /*
    15. 将自定义的 Druid数据源添加到容器中,不再让 Spring Boot 自动创建
    16. 绑定application.yml全局配置文件中的druid数据源属性到com.alibaba.druid.pool.DruidDataSource从而让它们生效
    17. @ConfigurationProperties(prefix = "spring.datasource"):作用就是将application.yml全局配置文件中
    18. 前缀为 spring.datasource的属性值注入到 com.alibaba.druid.pool.DruidDataSource 的同名参数中
    19. */
    20. @ConfigurationProperties(prefix = "spring.datasource")
    21. @Bean
    22. public DruidDataSource getDruidDataSource(){
    23. return new DruidDataSource();
    24. }
    25. //配置 Druid 监控管理后台的Servlet;
    26. //内置 Servlet 容器时没有web.xml文件,所以使用 Spring Boot 的注册 Servlet 方式
    27. @Bean
    28. public ServletRegistrationBean statViewServlet() {
    29. // 只要访问druid下面的路径,都会进入到druid的监控页面(监控页面人家写好的,可以直接拿来用)
    30. ServletRegistrationBean bean = new ServletRegistrationBean(new StatViewServlet(), "/druid/*");
    31. // 这些参数可以在 com.alibaba.druid.support.http.StatViewServlet
    32. // 的父类 com.alibaba.druid.support.http.ResourceServlet 中找到
    33. Map initParams = new HashMap<>();
    34. // loginUsername、loginPassword两个key是固定写法
    35. initParams.put("loginUsername", "admin"); //后台管理界面的登录账号
    36. initParams.put("loginPassword", "123456"); //后台管理界面的登录密码
    37. //后台允许谁可以访问
    38. //initParams.put("allow", "localhost"):表示只有本机可以访问
    39. //initParams.put("allow", ""):为空或者为null时,表示允许所有访问
    40. initParams.put("allow", "");
    41. // 禁止谁访问
    42. //initParams.put("kuangshen", "192.168.1.20");表示禁止此ip访问
    43. //设置初始化参数
    44. bean.setInitParameters(initParams);
    45. return bean;
    46. }
    47. // 配置 Druid 监控 之 web 监控的 filter
    48. // WebStatFilter:用于配置Web和Druid数据源之间的管理关联监控统计
    49. @Bean
    50. public FilterRegistrationBean webStatFilter() {
    51. FilterRegistrationBean bean = new FilterRegistrationBean();
    52. bean.setFilter(new WebStatFilter());
    53. //exclusions:设置哪些请求进行过滤排除掉,从而不进行统计
    54. Map initParams = new HashMap<>();
    55. initParams.put("exclusions", "*.js,*.css,/druid/*,/jdbc/*");
    56. bean.setInitParameters(initParams);
    57. //"/*" 表示过滤所有请求
    58. bean.setUrlPatterns(Arrays.asList("/*"));
    59. return bean;
    60. }
    61. }

    initParams设置的key属性值,可以在WebStatFilter类中找到

  • 相关阅读:
    使用jdk自带的VisualVM分析hprof堆转储文件
    大聪明教你学Java | 在支付模块中如何防止掉单和重复支付
    Linux常用命令— 目录和文件都能操作的命令
    【C++】匿名对象 ③ ( 函数返回值为对象值时 匿名对象 的 拷贝构造函数 与 析构函数 调用情况分析 )
    每个程序员必须掌握的常用英语词汇
    sqlite3入门
    龙格-库塔法(Runge-Kutta methods)
    大数据课程K22——Spark的SparkSQL的API调用
    【小技巧】MyBatis 中 SQL 写法技巧小总结
    「Verilog学习笔记」边沿检测
  • 原文地址:https://blog.csdn.net/w15558056319/article/details/125963793