之前在对项目中Hibernate的缓存性能进行测试时发现的一个问题,不知大家有没有遇到或者是解决办法。
问题是:使用sql query且是多表关联查询,并启用查询缓存时,对关联表修改后,查询缓存未能更新,出现了不正确的查询结果集。
测试场景:
1. 用例:为简单起见,测试中使用了两表关联查询。查询指定角色 (roleCode) 的所有已授权限点 (Perm集合)
2. 库表:
权限点表(sys_perm )字段: permCode, permName, moduleCode,...
角色授权表(sys_role_perm )字段: roleCode, permCode, createTime,...
3. 关联查询
(其实仅判断所授权限点编码集合,用Hibernate 关联抓取,就可以解决,并且二级缓存也能很好的控制此问题;即使用 named sql query进行鉴权,也只需查 sys_role_perm表返回 permCode集合。这里返回 perm 集合, 这里主要是为测试关联查询时的cache query问题而举的一个例子)
<!-- 角色拥有的所有已授权限集合 -->
<sql-query name="system.roleperms">
select * from sys_perm t join sys_role_perm o
on t.perm_code = o.perm_code
where o.role_code = :roleCode
</sql-query>
</class>
3. 预置数据:
角色编码: STESTOR,
权限点:permCode 组织新增: ORG_ADD
在 sys_role_perm 表中为 STESTOR 授予 组织管理新增的权限:
(STESTOR,ORG_ADD,2007-3-27 10:34:32)
4. 测试代码:
执行三次doQueryRolePerms 查询功能,在第二次执行完毕时,删除 (STESTOR,ORG_ADD) 这条授权,观察第三次查询是否重新去数据库取数。
for (int i = 0; i < 3; i++) {
System.out.println(" Execute No. " + i + " ********************");
List perms = (List)perm.doQueryRolePerms("STESTOR");
System.out.println("(" + i +")result size:" + perms.size() );
if(i % 2 == 1)
rolePerm.doRemoveByVO(rolePermVO1); //删除授权:STESTOR, ORG_ADD
}
5. 执行分析:
第1,2次执行,由于有预置授权,因此 result size: 1;
第3次执行查询,由于删除了唯一的授权,那么 result size: 0。
6. 实际结果:
Execute No. 0 ********************
2008-10-06 17:26:26,406 [DEBUG](AbstractBatcher.java,324) - select this.PERMCODE as PERM1_0_, this.MODULECODE as MODULE2_15_0_, this.PERMTYPECODE as PERM3_15_0_, this.PERMNAME as PERM4_15_0_, this.PERMDESC as PERM5_15_0_, this.PORTNO as PORT6_15_0_ from (select t.perm_code as permCode,
t.module_code as moduleCode,
t.perm_name as permName,
t.perm_desc as permDesc,
t.port_no as portNo,
t.perm_type_code as permTypeCode
from sys_perm t join sys_role_perm o
on t.perm_code = o.perm_code
where o.role_code = ? ) this
(No.0)result size:1
Execute No. 1 ********************
(No.1)result size:1
2008-10-06 17:26:26,484 [DEBUG](AbstractBatcher.java,324) - delete from SYS_ROLE_PERM where PERM_CODE=? and ROLE_CODE=?
Execute No. 2 ********************
(No.2)result size:1
Time: 0.422
OK (1 test)
从结果可以看出,第1次,执行了查询;
第2次没有执行查询,说明 query cache,二级cache都起了作用。
但第3次查询,没有重新执行sql,仍然返回的是第二缓存的结果。
因此可以判定, 第3次查出的是旧数据。
7. 分析及结论:
Hibernate query cache 在关联表的数据删除时,没能通知查询缓存及时失效或更新, 以便获取最新数据。
8. 解决办法
暂时还没找到Hibernate自身的解决办法, 为避免此问题,可以关闭查询缓存。 看大家有没有遇到过此问题,分享下你们的经验。
如果hibernate真的没有解决这个问题,我能想到的一个思路就是,在 named query执行时,分析出查询的关联表,并在关联表进行 create,update,delete时及时通知该 named query的缓存失效。
关联查询,特别是多表关联,且操作复杂时,要精细的进行缓存通知比较困难(例如:修改了 Admin 角色的授权,就对上例的查询没有影响,而修改了 STESTOR 角色的授权才需要通知cache更新,但这判断起来有一定难度),可以做一个笼统的逻辑,即 create,update,delete 关联表后,对 named query的cache都要通知它清除,以便重新查询获取最新数据。
query cache的利用率,即命中率取决于具体业务的增删改操作的频率,这个测试暂不考虑此因素 query cache的价值问题。
经过一天的努力,终于解决此问题, 并附源代码和fix包:
解决Hibernate SQL Query Cache的一个可靠性问题(附源码)
分享到:
相关推荐
1. Spring框架:Spring是一个轻量级的Java开发框架,提供了丰富的功能和模块,用于开发企业级应用。它包括IoC(Inverse of Control,控制反转)容器、AOP(Aspect-Oriented Programming,面向切面编程)等特性,可以...
1. Spring框架:Spring是一个轻量级的Java开发框架,提供了丰富的功能和模块,用于开发企业级应用。它包括IoC(Inverse of Control,控制反转)容器、AOP(Aspect-Oriented Programming,面向切面编程)等特性,可以...
自1998年首次发布以来,MySQL以其卓越的性能、可靠性和可扩展性,成为全球范围内Web应用程序、企业级解决方案以及其他各种数据处理场景的首选数据库平台之一。 以下是对MySQL数据库的详细介绍: 核心特性与优势 ...
1. Spring框架:Spring是一个轻量级的Java开发框架,提供了丰富的功能和模块,用于开发企业级应用。它包括IoC(Inverse of Control,控制反转)容器、AOP(Aspect-Oriented Programming,面向切面编程)等特性,可以...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
Flume 是一个分布式、可靠和高可用的服务,用于收集、聚合以及移动大量日志数据,使用一个简单灵活的架构,就流数据模型。这是一个可靠、容错的服务。 彩信发送开发包 apimms apimms 提供了各种语言用来发送彩信...
JAVA多用户B2B2C商城系统源码 开发语言 : JAVA ...系统支持多服务器分布式部署,互通机制,也可以修改系统相关功能进行session缓存共享处理,轻松完成分布式部署,为大数据、大访问量的运营商提供可靠的功能保证。
J2EE体系结构提供中间层集成框架用来满足无需太多费用而又需要高可用性、高可靠性 以及可扩展性的应用的需求。通过提供统一的开发平台,J2EE降低了开发多层应用的费 用和复杂性,同时提供对现有应用程序集成强有力...
J2EE体系结构提供中间层集成框架用来满足无需太多费用而又需要高可用性、高可靠性 以及可扩展性的应用的需求。通过提供统一的开发平台,J2EE降低了开发多层应用的费 用和复杂性,同时提供对现有应用程序集成强有力...