Druid数据库监控

Posted edda

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了Druid数据库监控相关的知识,希望对你有一定的参考价值。

一、简介

Druid是阿里开源的一个JDBC应用组件, 其包括三部分:

  • DruidDriver: 代理Driver,能够提供基于Filter-Chain模式的插件体系。

  • DruidDataSource: 高效可管理的数据库连接池。

  • SQLParser: 实用的SQL语法分析

通过Druid连接池中间件, 我们可以实现:

  • 可以监控数据库访问性能,Druid内置提供了一个功能强大的StatFilter插件,能够详细统计SQL的执行性能,这对于线上分析数据库访问性能有帮助。

  • 替换传统的DBCP和C3P0连接池中间件。Druid提供了一个高效、功能强大、可扩展性好的数据库连接池。

  • 数据库密码加密。直接把数据库密码写在配置文件中,容易导致安全问题。DruidDruiver和DruidDataSource都支持PasswordCallback。

  • SQL执行日志,Druid提供了不同的LogFilter,能够支持Common-Logging、Log4j和JdkLog,你可以按需要选择相应的LogFilter,监控你应用的数据库访问情况。

  • 扩展JDBC,如果你要对JDBC层有编程的需求,可以通过Druid提供的Filter-Chain机制,很方便编写JDBC层的扩展插件

    <p>更多详细信息参考官方文档:<a href="https://github.com/alibaba/druid/wiki">https://github.com/alibaba/druid/wiki</a></p>
    </li>
    

Druid Spring Boot Starter 是阿里官方提供的 Spring Boot 插件,用于帮助在Spring Boot项目中轻松集成Druid数据库连接池和监控。

更多资料参考:

Druid: https://github.com/alibaba/druid

Druid Spring Starter: https://github.com/alibaba/druid/tree/master/druid-spring-boot-starter

 

二、搭建demo

(1)创建项目

创建spring boot项目

技术图片

(2)依赖

  1. <?xml version="1.0" encoding="UTF-8"?>
  2. <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
  3. xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/maven-4.0.0.xsd">
  4. <modelVersion>4.0.0</modelVersion>
  5. <parent>
  6. <groupId>org.springframework.boot</groupId>
  7. <artifactId>spring-boot-starter-parent</artifactId>
  8. <version>2.1.7.RELEASE</version>
  9. <relativePath/> <!-- lookup parent from repository -->
  10. </parent>
  11. <groupId>com.zzq</groupId>
  12. <artifactId>sping-data-monitor</artifactId>
  13. <version>0.0.1-SNAPSHOT</version>
  14. <name>sping-data-monitor</name>
  15. <description>Demo project for Spring Boot</description>
  16. <properties>
  17. <project.build.sourceEncoding>UTF-8</project.build.sourceEncoding>
  18. <project.reporting.outputEncoding>UTF-8</project.reporting.outputEncoding>
  19. <java.version>1.8</java.version>
  20. </properties>
  21. <dependencies>
  22. <dependency>
  23. <groupId>com.alibaba</groupId>
  24. <artifactId>druid</artifactId>
  25. <version>1.1.10</version>
  26. </dependency>
  27. <!--修改mysql驱动版本-->
  28. <dependency>
  29. <groupId>mysql</groupId>
  30. <artifactId>mysql-connector-java</artifactId>
  31. <version>5.1.47</version>
  32. <scope>runtime</scope>
  33. </dependency>
  34. </dependencies>
  35. <build>
  36. <plugins>
  37. <plugin>
  38. <groupId>org.springframework.boot</groupId>
  39. <artifactId>spring-boot-maven-plugin</artifactId>
  40. </plugin>
  41. </plugins>
  42. </build>
  43. </project>

(3)application.properties配置

  1. application:
  2. name: sping-data-monitor # 暴露微服务名称
  3. #数据库配置
  4. # 驱动配置信息
  5. spring.datasource.type=com.alibaba.druid.pool.DruidDataSource
  6. spring.datasource.url=jdbc:mysql://localhost:3306/test?useUnicode=true&characterEncoding=UTF-8&useSSL=false&zeroDateTimeBehavior=convertToNull
  7. spring.datasource.username=root
  8. spring.datasource.password=root
  9. spring.datasource.driver-class-name=com.mysql.jdbc.Driver
  10. # 连接池的配置信息
  11. # 初始化大小,最小,最大
  12. spring.datasource.initialSize=3
  13. spring.datasource.minIdle=5
  14. spring.datasource.maxActive=20
  15. # 配置获取连接等待超时的时间
  16. spring.datasource.maxWait=30000
  17. # 配置间隔多久才进行一次检测,检测需要关闭的空闲连接,单位是毫秒
  18. spring.datasource.timeBetweenEvictionRunsMillis=60000
  19. # 配置一个连接在池中最小生存的时间,单位是毫秒
  20. spring.datasource.minEvictableIdleTimeMillis=300000
  21. spring.datasource.validationQuery=SELECT 1 FROM DUAL
  22. spring.datasource.testWhileIdle=true
  23. spring.datasource.testOnBorrow=false
  24. spring.datasource.testOnReturn=false
  25. # 打开PSCache,并且指定每个连接上PSCache的大小
  26. spring.datasource.poolPreparedStatements=true
  27. spring.datasource.maxPoolPreparedStatementPerConnectionSize=20
  28. # 配置监控统计拦截的filters,去掉后监控界面sql无法统计,‘wall‘用于防火墙
  29. spring.datasource.filters=stat,wall
  30. # 通过connectProperties属性来打开mergeSql功能;慢SQL记录
  31. spring.datasource.connectionProperties=druid.stat.mergeSql=true;druid.stat.slowSqlMillis=10000

(4)DruidDBConfig

  1. package com.zzq.config;
  2. import com.alibaba.druid.pool.DruidDataSource;
  3. import org.slf4j.Logger;
  4. import org.slf4j.LoggerFactory;
  5. import org.springframework.beans.factory.annotation.Value;
  6. import org.springframework.context.annotation.Bean;
  7. import org.springframework.context.annotation.Configuration;
  8. import org.springframework.context.annotation.Primary;
  9. import javax.sql.DataSource;
  10. import java.sql.SQLException;
  11. @Configuration
  12. public class DruidDBConfig {
  13. private Logger logger = LoggerFactory.getLogger(DruidDBConfig.class);
  14. @Value("${spring.datasource.url}")
  15. private String dbUrl;
  16. @Value("${spring.datasource.username}")
  17. private String username;
  18. @Value("${spring.datasource.password}")
  19. private String password;
  20. @Value("${spring.datasource.driver-class-name}")
  21. private String driverClassName;
  22. @Value("${spring.datasource.initialSize}")
  23. private int initialSize;
  24. @Value("${spring.datasource.minIdle}")
  25. private int minIdle;
  26. @Value("${spring.datasource.maxActive}")
  27. private int maxActive;
  28. @Value("${spring.datasource.maxWait}")
  29. private int maxWait;
  30. @Value("${spring.datasource.timeBetweenEvictionRunsMillis}")
  31. private int timeBetweenEvictionRunsMillis;
  32. @Value("${spring.datasource.minEvictableIdleTimeMillis}")
  33. private int minEvictableIdleTimeMillis;
  34. @Value("${spring.datasource.validationQuery}")
  35. private String validationQuery;
  36. @Value("${spring.datasource.testWhileIdle}")
  37. private boolean testWhileIdle;
  38. @Value("${spring.datasource.testOnBorrow}")
  39. private boolean testOnBorrow;
  40. @Value("${spring.datasource.testOnReturn}")
  41. private boolean testOnReturn;
  42. @Value("${spring.datasource.poolPreparedStatements}")
  43. private boolean poolPreparedStatements;
  44. @Value("${spring.datasource.maxPoolPreparedStatementPerConnectionSize}")
  45. private int maxPoolPreparedStatementPerConnectionSize;
  46. @Value("${spring.datasource.filters}")
  47. private String filters;
  48. @Value("{spring.datasource.connectionProperties}")
  49. private String connectionProperties;
  50. /**
  51. * @Bean 声明,DataSource 对象为 Spring 容器所管理;
  52. * @Primary 表示这里定义的DataSource将覆盖其他来源的DataSource。
  53. * StatFilter,用于统计监控信息。StatFilter的别名是stat。
  54. * 统计SQL信息,合并统计。mergeStat是的MergeStatFilter缩写。
  55. * 通过 DataSource 的属性<property name="filters" value="mergeStat" /> 或者
  56. * connectProperties属性来打开mergeSql功能 <property name="connectionProperties" value="druid.stat.mergeSql=true" />
  57. * StatFilter属性slowSqlMillis用来配置SQL慢的标准
  58. *
  59. * @return
  60. */
  61. @Bean
  62. @Primary
  63. public DataSource dataSource() {
  64. DruidDataSource datasource = new DruidDataSource();
  65. datasource.setUrl(dbUrl);
  66. datasource.setDriverClassName(driverClassName);
  67. datasource.setUsername(username);
  68. datasource.setPassword(password);
  69. //configuration
  70. datasource.setInitialSize(initialSize);
  71. datasource.setMinIdle(minIdle);
  72. datasource.setMaxActive(maxActive);
  73. datasource.setMaxWait(maxWait);
  74. datasource.setTimeBetweenEvictionRunsMillis(timeBetweenEvictionRunsMillis);
  75. datasource.setMinEvictableIdleTimeMillis(minEvictableIdleTimeMillis);
  76. datasource.setValidationQuery(validationQuery);
  77. datasource.setTestWhileIdle(testWhileIdle);
  78. datasource.setTestOnBorrow(testOnBorrow);
  79. datasource.setTestOnReturn(testOnReturn);
  80. datasource.setPoolPreparedStatements(poolPreparedStatements);
  81. datasource.setMaxPoolPreparedStatementPerConnectionSize(maxPoolPreparedStatementPerConnectionSize);
  82. try {
  83. /**
  84. * 设置StatFilter,用于统计监控信息。
  85. * StatFilter的别名是stat
  86. *
  87. */
  88. datasource.setFilters(filters);
  89. } catch (SQLException e) {
  90. logger.error("druid configuration initialization filter : {0}",e);
  91. }
  92. datasource.setConnectionProperties(connectionProperties);
  93. return datasource;
  94. }
  95. }

(5)DruidStatFilter

  1. package com.zzq.filter;
  2. import com.alibaba.druid.support.http.WebStatFilter;
  3. import javax.servlet.annotation.WebFilter;
  4. import javax.servlet.annotation.WebInitParam;
  5. /**
  6. * WebStatFilter用于采集web-jdbc关联监控的数据。
  7. * 属性filterName声明过滤器的名称,可选
  8. * 属性urlPatterns指定要过滤 的URL模式,也可使用属性value来声明.(指定要过滤的URL模式是必选属性)
  9. */
  10. @WebFilter(
  11. urlPatterns = "/sping-data-monitor/*",
  12. initParams = {
  13. @WebInitParam(name = "exclusions",value = "*.js,*.gif,*.jpg,*.png,*.css,*.ico,/druid/*")
  14. }
  15. )
  16. public class DruidStatFilter extends WebStatFilter {
  17. }

(6)DruidStatViewServlet

  1. package com.zzq.servlet;
  2. import com.alibaba.druid.support.http.StatViewServlet;
  3. import javax.servlet.annotation.WebInitParam;
  4. import javax.servlet.annotation.WebServlet;
  5. /**
  6. * StatViewServlet用于展示Druid的统计信息。
  7. * 提供监控信息展示的html页面
  8. * 提供监控信息的JSON API
  9. *
  10. * 内置监控页面的首页是/druid/index.html
  11. *
  12. */
  13. /**
  14. * @Webservlet
  15. * 有两个属性可以用来表示Servlet的访问路径,分别是value和urlPatterns。value和urlPatterns都是数组形式,
  16. * 表示我们可以把一个Servlet映射到多个访问路径,但是value和urlPatterns不能同时使用。
  17. *
  18. */
  19. @WebServlet(
  20. urlPatterns = {"/druid/*"},//#监控地址,默认 /druid/*
  21. initParams = {
  22. @WebInitParam(name = "loginUsername", value = "admin"),//#登录用户名
  23. @WebInitParam(name = "loginPassword", value = "admin"),//#登录密码
  24. @WebInitParam(name = "resetEnable", value = "false"),
  25. // @WebInitParam(name = "allow", value = "127.0.0.1") #IP 白名单
  26. }
  27. )
  28. public class DruidStatViewServlet extends StatViewServlet {
  29. }

(7)启动类

  1. package com.zzq;
  2. import org.springframework.boot.SpringApplication;
  3. import org.springframework.boot.autoconfigure.SpringBootApplication;
  4. import org.springframework.boot.web.servlet.ServletComponentScan;
  5. @SpringBootApplication
  6. @ServletComponentScan(basePackages = {"com.zzq.**.servlet"})
  7. public class SpingDataMonitorApplication {
  8. public static void main(String[] args) {
  9. SpringApplication.run(SpingDataMonitorApplication.class, args);
  10. }
  11. }

(8)效果

http://localhost:8080/druid/login.html

用户名/密码   admin/admin

技术图片

技术图片

以上是关于Druid数据库监控的主要内容,如果未能解决你的问题,请参考以下文章

案例: 模拟登陆,获取Druid SQL监控数据

SpringBoot系列七:SpringBoot 集成 MyBatis事物配置及使用druid 数据源druid 监控使用

Spring Boot 集成 Druid 批量插入数据和效率监控配置

springboot中使用druid和监控配置

SpringBoot+Druid整合Druid监控页面的数据源功能没有信息

Spring Boot 集成 Druid 批量插入数据和效率监控配置