Springboot整合druid连接池,开启sql监控,慢SQL检测 (附git源码)
Springboot-cli 开发脚手架系列
Springboot整合druid连接池
文章目录
- Springboot-cli 开发脚手架系列
- 介绍
-
- 1. 环境
- 2. 创建实体及xml映射文件
- 3. 编写业务代码
- 4. 编写测试接口
- 5. 测试效果
介绍
- Druid是一个高效的数据查询系统,主要解决的是对于大量的基于时序的数据进行聚合查询。数据可以实时摄入,进入到Druid后立即可查,同时数据是几乎是不可变。通常是基于时序的事实事件,事实发生后进入Druid,外部系统就可以对该事实进行查询。
- Druid设计三个原则
- 快速查询(Fast Query) : 部分数据聚合(Partial Aggregate) + 内存华(In-Memory) + 索引(Index)
- 水平拓展能力(Horizontal Scalability):分布式数据(Distributed data)+并行化查询(Parallelizable Query)
- 实时分析(Realtime Analytics):Immutable Past , Append-Only Future
- Druid的技术特点
- 数据吞吐量大
- 支持流式数据摄入和实时
- 查询灵活且快速
本博客项目源码地址:
- 项目源码github地址
- 项目源码国内gitee地址
1. 环境
pom.xml
引入依赖
<dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> <scope>runtime</scope> </dependency> <dependency> <groupId>com.baomidou</groupId> <artifactId>mybatis-plus-boot-starter</artifactId> <version>3.3.1</version> </dependency> <dependency> <groupId>com.alibaba</groupId> <artifactId>druid-spring-boot-starter</artifactId> <version>1.2.3</version> </dependency>
application.yml
配置连接池
server: port: 9999spring: datasource: url: jdbc:mysql://192.168.0.54:3306/example?useUnicode=true&&characterEncoding=utf-8&&useSSL=false username: root password: 123456 type: com.alibaba.druid.pool.DruidDataSource driver-class-name: com.mysql.cj.jdbc.Driver druid: stat-view-servlet: # 默认true 内置监控页面首页/druid/index.html enabled: true url-pattern: /druid/* # 允许清空统计数据 reset-enable: true # 这里为登录页面账号密码配置 login-username: root login-password: 123456 # IP白名单 多个逗号分隔 allow: # IP黑名单 deny: filter: stat: # 开启监控sql enabled: true # 显示并标注慢sql 默认当超过3秒显示 log-slow-sql: true slow-sql-millis: 3000 merge-sql: true # 防SQL注入过滤 wall: config: # 允许多条sql同时执行 multi-statement-allow: true################################################################################################### mybatis-plus##################################################################################################mybatis-plus: mapper-locations: classpath:/mapper/*.xml #实体扫描,多个package用逗号或者分号分隔 typeAliasesPackage: com.springboot.cli.domain global-config: #数据库相关配置 db-config: #主键类型 AUTO:"数据库ID自增", INPUT:"用户输入ID", ID_WORKER:"全局唯一ID (数字类型唯一ID)", UUID:"全局唯一ID UUID"; id-type: AUTO logic-delete-value: -1 logic-not-delete-value: 0 banner: false configuration: map-underscore-to-camel-case: true cache-enabled: false #配置JdbcTypeForNull jdbc-type-for-null: 'null'
解析: 这里配置了
stat-view-servlet.enabled : true
开启内置监控页面首页/druid/index.html
,待会我们会用这个界面查看我们的sql执行效率。
- 其它配置解析
配置 | 缺省值 | 说明 |
---|---|---|
name | 配置这个属性的意义在于,如果存在多个数据源,监控的时候可以通过名字来区分开来。如果没有配置,将会生成一个名字,格式是:“DataSource-” + System.identityHashCode(this). 另外配置此属性至少在1.0.5版本中是不起作用的,强行设置name会出错。详情-点此处。 | |
url | 连接数据库的url,不同数据库不一样。例如: mysql : jdbc:mysql://10.20.153.104:3306/druid2 oracle : jdbc:oracle:thin:@10.20.149.85:1521:ocnauto | |
username | 连接数据库的用户名 | |
password | 连接数据库的密码。如果你不希望密码直接写在配置文件中,可以使用ConfigFilter。详细看这里 | |
driverClassName | 根据url自动识别 | 这一项可配可不配,如果不配置druid会根据url自动识别dbType,然后选择相应的driverClassName |
initialSize | 0 | 初始化时建立物理连接的个数。初始化发生在显示调用init方法,或者第一次getConnection时 |
maxActive | 8 | 最大连接池数量 |
maxIdle | 8 | 已经不再使用,配置了也没效果 |
minIdle | 最小连接池数量 | |
maxWait | 获取连接时最大等待时间,单位毫秒。配置了maxWait之后,缺省启用公平锁,并发效率会有所下降,如果需要可以通过配置useUnfairLock属性为true使用非公平锁。 | |
poolPreparedStatements | false | 是否缓存preparedStatement,也就是PSCache。PSCache对支持游标的数据库性能提升巨大,比如说oracle。在mysql下建议关闭。 |
maxPoolPreparedStatementPerConnectionSize | -1 | 要启用PSCache,必须配置大于0,当大于0时,poolPreparedStatements自动触发修改为true。在Druid中,不会存在Oracle下PSCache占用内存过多的问题,可以把这个数值配置大一些,比如说100 |
validationQuery | 用来检测连接是否有效的sql,要求是一个查询语句,常用select ‘x’。如果validationQuery为null,testOnBorrow、testOnReturn、testWhileIdle都不会起作用。 | |
validationQueryTimeout | 单位:秒,检测连接是否有效的超时时间。底层调用jdbc Statement对象的void setQueryTimeout(int seconds)方法 | |
testOnBorrow | true | 申请连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能。 |
testOnReturn | false | 归还连接时执行validationQuery检测连接是否有效,做了这个配置会降低性能。 |
testWhileIdle | false | 建议配置为true,不影响性能,并且保证安全性。申请连接的时候检测,如果空闲时间大于timeBetweenEvictionRunsMillis,执行validationQuery检测连接是否有效。 |
keepAlive | false (1.0.28) | 连接池中的minIdle数量以内的连接,空闲时间超过minEvictableIdleTimeMillis,则会执行keepAlive操作。 |
timeBetweenEvictionRunsMillis | 1分钟(1.0.14) | 有两个含义: 1) Destroy线程会检测连接的间隔时间,如果连接空闲时间大于等于minEvictableIdleTimeMillis则关闭物理连接。 2) testWhileIdle的判断依据,详细看testWhileIdle属性的说明 |
numTestsPerEvictionRun | 30分钟(1.0.14) | 不再使用,一个DruidDataSource只支持一个EvictionRun |
minEvictableIdleTimeMillis | 连接保持空闲而不被驱逐的最小时间 | |
connectionInitSqls | 物理连接初始化的时候执行的sql | |
exceptionSorter | 根据dbType自动识别 | 当数据库抛出一些不可恢复的异常时,抛弃连接 |
filters | 属性类型是字符串,通过别名的方式配置扩展插件,常用的插件有: 监控统计用的filter:stat 日志用的filter:log4j 防御sql注入的filter:wall | |
proxyFilters | 类型是List,如果同时配置了filters和proxyFilters,是组合关系,并非替换关系 |
2. 创建实体及xml映射文件
User.java
@Data@EqualsAndHashCode(callSuper = false)@Accessors(chain = true)public class User extends Model<User> { private static final long serialVersionUID=1L; @TableId(value = "user_id", type = IdType.AUTO) private Long userId; /** * 用户名 */ private String username; /** * 账号 */ private String account; /** * 密码 */ private String password; /** * 创建日期 */ private Date createdDate; /** * 创建人 */ private Long createdBy; /** * 修改日期 */ private Date updatedDate; /** * 修改人 */ private Long updatedBy; @Override protected Serializable pkVal() { return this.userId; }}
- 创建
UserMapper.xml
,放在项目resources/mapper
文件夹下
<!DOCTYPE mapper PUBLIC "-//mybatis.org//DTD Mapper 3.0//EN" "http://mybatis.org/dtd/mybatis-3-mapper.dtd"><mapper namespace="com.springboot.cli.dao.UserMapper"> <resultMap id="BaseResultMap" type="com.springboot.cli.domain.User"> <id column="user_id" property="userId" /> <result column="username" property="username" /> <result column="account" property="account" /> <result column="password" property="password" /> <result column="created_date" property="createdDate" /> <result column="created_by" property="createdBy" /> <result column="updated_date" property="updatedDate" /> <result column="updated_by" property="updatedBy" /> </resultMap></mapper>
- dao层编写,创建
UserMapper
@Mapperpublic interface UserMapper extends BaseMapper<User> {}
3. 编写业务代码
- 接口文件
IUserService
public interface IUserService extends IService<User> {}
- 实现类
UserServiceImpl
@Servicepublic class UserServiceImpl extends ServiceImpl<UserMapper, User> implements IUserService {}
4. 编写测试接口
IndexController
@RestController@Slf4j@RequiredArgsConstructorpublic class IndexController { private final UserServiceImpl userService; /** * 查询所有用户 */ @GetMapping("/list") public List<User> list() { return userService.list(); }}
5. 测试效果
- 启动项目
- druid监控界面地址 账号密码 root/123456
http://localhost:9999/druid/sql.html
- 查询接口
http://localhost:9999/list
如图所示,通过druid监控页面,我们就能实时看到sql的各项执行数据了。