> 文档中心 > Springboot整合druid连接池,开启sql监控,慢SQL检测 (附git源码)

Springboot整合druid连接池,开启sql监控,慢SQL检测 (附git源码)


Springboot-cli 开发脚手架系列

Springboot整合druid连接池


文章目录

  • Springboot-cli 开发脚手架系列
  • 介绍
    • 1. 环境
    • 2. 创建实体及xml映射文件
    • 3. 编写业务代码
    • 4. 编写测试接口
    • 5. 测试效果

介绍

  • Druid是一个高效的数据查询系统,主要解决的是对于大量的基于时序的数据进行聚合查询。数据可以实时摄入,进入到Druid后立即可查,同时数据是几乎是不可变。通常是基于时序的事实事件,事实发生后进入Druid,外部系统就可以对该事实进行查询。
  • Druid设计三个原则
  1. 快速查询(Fast Query) : 部分数据聚合(Partial Aggregate) + 内存华(In-Memory) + 索引(Index)
  2. 水平拓展能力(Horizontal Scalability):分布式数据(Distributed data)+并行化查询(Parallelizable Query)
  3. 实时分析(Realtime Analytics):Immutable Past , Append-Only Future
  • Druid的技术特点
  1. 数据吞吐量大
  2. 支持流式数据摄入和实时
  3. 查询灵活且快速

本博客项目源码地址:

  • 项目源码github地址
  • 项目源码国内gitee地址

1. 环境

  • pom.xml引入依赖
           <dependency>     <groupId>mysql</groupId>     <artifactId>mysql-connector-java</artifactId>     <scope>runtime</scope> </dependency>  <dependency>     <groupId>com.baomidou</groupId>     <artifactId>mybatis-plus-boot-starter</artifactId>     <version>3.3.1</version> </dependency>  <dependency>     <groupId>com.alibaba</groupId>     <artifactId>druid-spring-boot-starter</artifactId>     <version>1.2.3</version> </dependency>
  • application.yml配置连接池
server:  port: 9999spring:  datasource:    url: jdbc:mysql://192.168.0.54:3306/example?useUnicode=true&&characterEncoding=utf-8&&useSSL=false    username: root    password: 123456    type: com.alibaba.druid.pool.DruidDataSource    driver-class-name: com.mysql.cj.jdbc.Driver    druid:      stat-view-servlet: # 默认true 内置监控页面首页/druid/index.html enabled: true url-pattern: /druid/* # 允许清空统计数据 reset-enable: true # 这里为登录页面账号密码配置 login-username: root login-password: 123456 # IP白名单 多个逗号分隔 allow: # IP黑名单 deny:      filter: stat:   # 开启监控sql   enabled: true   # 显示并标注慢sql 默认当超过3秒显示   log-slow-sql: true   slow-sql-millis: 3000   merge-sql: true # 防SQL注入过滤 wall:   config:     # 允许多条sql同时执行     multi-statement-allow: true###################################################################################################   mybatis-plus##################################################################################################mybatis-plus:  mapper-locations: classpath:/mapper/*.xml  #实体扫描,多个package用逗号或者分号分隔  typeAliasesPackage: com.springboot.cli.domain  global-config:    #数据库相关配置    db-config:      #主键类型  AUTO:"数据库ID自增", INPUT:"用户输入ID", ID_WORKER:"全局唯一ID (数字类型唯一ID)", UUID:"全局唯一ID UUID";      id-type: AUTO      logic-delete-value: -1      logic-not-delete-value: 0    banner: false  configuration:    map-underscore-to-camel-case: true    cache-enabled: false    #配置JdbcTypeForNull    jdbc-type-for-null: 'null'

解析: 这里配置了stat-view-servlet.enabled : true 开启内置监控页面首页/druid/index.html,待会我们会用这个界面查看我们的sql执行效率。

  • 其它配置解析
配置 缺省值 说明
name 配置这个属性的意义在于,如果存在多个数据源,监控的时候可以通过名字来区分开来。如果没有配置,将会生成一个名字,格式是:“DataSource-” + System.identityHashCode(this). 另外配置此属性至少在1.0.5版本中是不起作用的,强行设置name会出错。详情-点此处。
url 连接数据库的url,不同数据库不一样。例如: mysql : jdbc:mysql://10.20.153.104:3306/druid2 oracle : jdbc:oracle:thin:@10.20.149.85:1521:ocnauto
username 连接数据库的用户名
password 连接数据库的密码。如果你不希望密码直接写在配置文件中,可以使用ConfigFilter。详细看这里
driverClassName 根据url自动识别 这一项可配可不配,如果不配置druid会根据url自动识别dbType,然后选择相应的driverClassName
initialSize 0 初始化时建立物理连接的个数。初始化发生在显示调用init方法,或者第一次getConnection时
maxActive 8 最大连接池数量
maxIdle 8 已经不再使用,配置了也没效果
minIdle 最小连接池数量
maxWait 获取连接时最大等待时间,单位毫秒。配置了maxWait之后,缺省启用公平锁,并发效率会有所下降,如果需要可以通过配置useUnfairLock属性为true使用非公平锁。
poolPreparedStatements false 是否缓存preparedStatement,也就是PSCache。PSCache对支持游标的数据库性能提升巨大,比如说oracle。在mysql下建议关闭。
maxPoolPreparedStatementPerConnectionSize -1 要启用PSCache,必须配置大于0,当大于0时,poolPreparedStatements自动触发修改为true。在Druid中,不会存在Oracle下PSCache占用内存过多的问题,可以把这个数值配置大一些,比如说100
validationQuery 用来检测连接是否有效的sql,要求是一个查询语句,常用select ‘x’。如果validationQuery为null,testOnBorrow、testOnReturn、testWhileIdle都不会起作用。
validationQueryTimeout 单位:秒,检测连接是否有效的超时时间。底层调用jdbc Statement对象的void setQueryTimeout(int seconds)方法
testOnBorrow true 申请连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能。
testOnReturn false 归还连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能。
testWhileIdle false 建议配置为true,不影响性能,并且保证安全性。申请连接的时候检测,如果空闲时间大于timeBetweenEvictionRunsMillis,执行validationQuery检测连接是否有效。
keepAlive false (1.0.28) 连接池中的minIdle数量以内的连接,空闲时间超过minEvictableIdleTimeMillis,则会执行keepAlive操作。
timeBetweenEvictionRunsMillis 1分钟(1.0.14) 有两个含义: 1) Destroy线程会检测连接的间隔时间,如果连接空闲时间大于等于minEvictableIdleTimeMillis则关闭物理连接。 2) testWhileIdle的判断依据,详细看testWhileIdle属性的说明
numTestsPerEvictionRun 30分钟(1.0.14) 不再使用,一个DruidDataSource只支持一个EvictionRun
minEvictableIdleTimeMillis 连接保持空闲而不被驱逐的最小时间
connectionInitSqls 物理连接初始化的时候执行的sql
exceptionSorter 根据dbType自动识别 当数据库抛出一些不可恢复的异常时,抛弃连接
filters 属性类型是字符串,通过别名的方式配置扩展插件,常用的插件有: 监控统计用的filter:stat 日志用的filter:log4j 防御sql注入的filter:wall
proxyFilters 类型是List,如果同时配置了filters和proxyFilters,是组合关系,并非替换关系

2. 创建实体及xml映射文件

  • User.java
@Data@EqualsAndHashCode(callSuper = false)@Accessors(chain = true)public class User extends Model<User> {    private static final long serialVersionUID=1L;      @TableId(value = "user_id", type = IdType.AUTO)    private Long userId;    /**     * 用户名     */    private String username;    /**     * 账号     */    private String account;    /**     * 密码     */    private String password;    /**     * 创建日期     */    private Date createdDate;    /**     * 创建人     */    private Long createdBy;    /**     * 修改日期     */    private Date updatedDate;    /**     * 修改人     */    private Long updatedBy;    @Override    protected Serializable pkVal() { return this.userId;    }}
  • 创建UserMapper.xml,放在项目resources/mapper文件夹下
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd"><mapper namespace="com.springboot.cli.dao.UserMapper">        <resultMap id="BaseResultMap" type="com.springboot.cli.domain.User"> <id column="user_id" property="userId" /> <result column="username" property="username" /> <result column="account" property="account" /> <result column="password" property="password" /> <result column="created_date" property="createdDate" /> <result column="created_by" property="createdBy" /> <result column="updated_date" property="updatedDate" /> <result column="updated_by" property="updatedBy" />    </resultMap></mapper>
  • dao层编写,创建UserMapper
@Mapperpublic interface UserMapper extends BaseMapper<User> {}

3. 编写业务代码

  • 接口文件IUserService
public interface IUserService extends IService<User> {}
  • 实现类UserServiceImpl
@Servicepublic class UserServiceImpl extends ServiceImpl<UserMapper, User> implements IUserService {}

4. 编写测试接口

  • IndexController
@RestController@Slf4j@RequiredArgsConstructorpublic class IndexController {    private final UserServiceImpl userService;    /**     * 查询所有用户     */    @GetMapping("/list")    public List<User> list() { return userService.list();    }}

5. 测试效果

  • 启动项目
  • druid监控界面地址 账号密码 root/123456
http://localhost:9999/druid/sql.html

Springboot整合druid连接池,开启sql监控,慢SQL检测 (附git源码)

  • 查询接口
http://localhost:9999/list

Springboot整合druid连接池,开启sql监控,慢SQL检测 (附git源码)
如图所示,通过druid监控页面,我们就能实时看到sql的各项执行数据了。