引自http://blog.csdn.net/axman/article/details/5591301
前段时间公司打造了自己的WEB开发框架新版,性能比以前的两个版有很大提高。在性能基准测试时,某个测试的业务场景为
18000个TPS左右。
但是后来增加了session序列化模块后,一下子下降低到6000个TPS左右,就是因为这个模块性能一下子降低三倍。
jvisualvm监视查看到其中的加密方法占用了47%的CPU处理时间,于是重点测试这个方法。
这个方法做了三件事。
1.加密,
2.压缩,
3.base64编码成可见字符
加密过程虽然消耗了一定的系统资源,但经百万次循环测试性能是可以接受的。
BASE64这个可以放心,测试过N次了。
于是测试压缩算法,单线程1万次循环时耗时在秒级,我想1百万次也就应该是两三分钟吧。
结果一跑以后,系统差点死掉,响应非常慢,看看后台非JAVA线程在十几秒内竟然一下子吃掉10G的内存,大量的磁盘交换产生。
不用说,肯定是有内存泄漏,生产系统中是因为采用CMS策略来进行GC的。因为不断进行回收,所以不会出现瞬间内存都被吃光的
情况。但是对于依赖finalize来做回收的情况,虽然对象最终会被回收,但利用率大大地打了下降了。
这是最简单的道理,就比如一个连接,在finalize中调用了close()方法,你即使不手工调用 close()方法它最后也被回收了,但它
利用率却下降低了好多倍,假设系统只允许1个连接,从产生到JVM回收它的过程是1秒,那么在1秒内如果你每次只使用100ms,然后手工close(),那么其它线程有9次机会重新产生连接,而如果利用finalize在1秒内只有一次使用机会,这还是因为CMS策略的GC,如果是
暂停式GC策略,利用率将打更大的折扣。
所以最终关注压缩的代码,其实只有三行:
DeflaterOutputStream dos = new DeflaterOutputStream(byteArrayOutputStream,new Deflater(Deflater.BEST_ COMPRESSION,false));
ObjectOutputStream out = new ObjectOutputStream (dos);
out.write(加密数据);
byte[] data = byteArrayOutputStream.toByteArray();
//close等收尾工作。
对于输出流这种常规操作,打造平台的大牛们不可能犯低级错误,而大量的内存泄漏应该和压缩参数无关,于是直接分析
Deflater类(因为之前大多数是直接使用GZipOutputStream,对Deflater类本身并不是很熟悉)。发现文档中有对于end方法的说明是:
end
public void end()
关闭解压缩器并放弃所有未处理的输入。此方法应该在不再使用该压缩器时调用,但是也可以由 finalize() 方法自动调用。调用此方法后,Deflater 对象的行为将是不确定的。
其实jdk自己的例子就给人一个误导:
- // Encode a String into bytes
- String inputString = "blahblahblah??";
- byte[] input = inputString.getBytes("UTF-8");
- // Compress the bytes
- byte[] output = new byte[100];
- Deflater compresser = new Deflater();
- compresser.setInput(input);
- compresser.finish();
- int compressedDataLength = compresser.deflate(output);
- // Decompress the bytes
- Inflater decompresser = new Inflater();
- decompresser.setInput(output, 0, compressedDataLength);
- byte[] result = new byte[100];
- int resultLength = decompresser.inflate(result);
- decompresser.end();
- // Decode the bytes into a String
- String outputString = new String(result, 0, resultLength, "UTF-8");
在这个例子中,压缩的代码并没有调用compresser.end,因为仅调用一次,最后肯定会在对象被回收时调用finalize来调用end();
这在偶尔调用一两次的情况下也没有大问题。
另外,对于DeflaterOutputStream构造方法中,如果你没有传入Deflater,它自己new了一个Deflater,并使用useDefaultDeflater标记来
在close()中调用Deflater的end(),但如果是你自己传入的Deflater,因为可能在外部会多次复用,本着谁生产谁负责的原则,它没有为你调用
end()。
凡是在finalize中调用方法说明一定要保证被回收,而在密集调情况下一定不能依赖finalize,上面已经说过道理。所以一定要在用完后立即调用它以“尽早地立即回收”。所以这里应该有一个手工调用的参与,于是修改为:
Deflater def = new Deflater(Deflater.BEST_ COMPRESSION,false);
DeflaterOutputStream dos = new DeflaterOutputStream(byteArrayOutputStream,def);
ObjectOutputStream out = new ObjectOutputStream (dos);
out.write(加密数据);
byte[] data = byteArrayOutputStream.toByteArray();
在finally语句中执行{
def.end();
close();
}
结果,呵呵,不用多说了..................................
相关推荐
* 轻松发现和消除性能瓶颈 * 查找问题代码 * 节省后续硬件及开发投入 * 增加应用发布信心 * 与开发过程集成,改善应用性能 JProbe Suite是一种能节省开发时间、降低开发费用、改善Java应用运行速度及和扩展能力的...
loadrunner测试过程中分析linux的性能
第3篇是性能问题诊断分析篇,主要介绍如何分析、定位性能瓶颈,涵盖Web服务器、应用服务器、数据库、应用代码、操作系统等层面的诊断分析。 《性能测试诊断分析与优化》结合主流性能测试工具LoadRunner,讲解性能...
注:以上过程并不是每个分析中都需要的,要根据测试目的和要求来确定分析的深度。对一些要求低的,我们分析到应用系统在将来大的负载压力(并发用户数、数据量)下,系统的硬件瓶颈在哪儿就够了。 • 分段排除法 ...
从一个现场说起,全程解析如何定位性能瓶颈。 排查过程 收到线上某业务后端的MySQL实例负载比较高的告警信息,于是登入服务器检查确认。 1. 首先我们进行OS层面的检查确认 登入服务器后,我们的目的是首先要确认当前...
很久之前收藏的一篇京东金融的性能测试指南,...每次进行性能测试以及发现性能瓶颈的过程都是一次经验的累积与学习的过程,在解决问题的时候我们会学到很多的技能和方法,希望性能测试指南能为大家提供一个方向的指引。
注:以上过程并不是每个分析中都需要的,要根据测试目的和要求来确定分析的深度。对一些要求低的,我们分析到应用系统在将来大的负载压力(并发用户数、数据量)下,系统的硬件瓶颈在哪儿就够了。
性能测试的概念是什么,基本目的是什么,我想大家都基本清楚,不作详述,总之,性能测试只是测试过程中的一种方式,... 所以,性能测试这种测试方式在发生过程中,其中一个过渡性的工作,就是对执行过程中的问题,
应用运行瓶颈分析 应用运行性能对比分析 Paratune软件特点 高易用性:Paratune软件无需安装,解压后直接启动,通过简单的图形操作,即可将应用运行特征呈现在屏幕上。 高实用性:提供定性的线条数据和定量的汇总...
* 轻松发现和消除性能瓶颈 * 查找问题代码 * 节省后续硬件及开发投入 * 增加应用发布信心 * 与开发过程集成,改善应用性能 JProbe Suite是一种能节省开发时间、降低开发费用、改善Java应用运行速度及和扩展能力的...
查找系统的性能瓶颈 给出较适合的软硬件配置方案 检验硬件配置能否满足客户要求 系统调优(硬件调优、数据库调优) 出一份报告给客户看 1.4 性能指标 (举例) 平均响应时间(秒) 成功率(%) 系统最大处理...
这是一个相当高级的SQL Server监控工具,全面监控SQL Server的活动与性能,分析性能瓶颈,给出优化建议。 监控SQL Server的活动:进程、任务,详细查看当前执行的语句与实际变量值,终止进程 IO/CPU/网络等性能...
总结了Loadrunner做性能过程中对于瓶颈的定位,各种指标和瓶颈分析
* 轻松发现和消除性能瓶颈 * 查找问题代码 * 节省后续硬件及开发投入 * 增加应用发布信心 * 与开发过程集成,改善应用性能 JProbe Suite是一种能节省开发时间、降低开发费用、改善Java应用运行速度及和扩展能力的...
* 轻松发现和消除性能瓶颈 * 查找问题代码 * 节省后续硬件及开发投入 * 增加应用发布信心 * 与开发过程集成,改善应用性能 JProbe Suite是一种能节省开发时间、降低开发费用、改善Java应用运行速度及和扩展能力的...
* 轻松发现和消除性能瓶颈 * 查找问题代码 * 节省后续硬件及开发投入 * 增加应用发布信心 * 与开发过程集成,改善应用性能 JProbe Suite是一种能节省开发时间、降低开发费用、改善Java应用运行速度及和扩展能力的...
* 轻松发现和消除性能瓶颈 * 查找问题代码 * 节省后续硬件及开发投入 * 增加应用发布信心 * 与开发过程集成,改善应用性能 JProbe Suite是一种能节省开发时间、降低开发费用、改善Java应用运行速度及和扩展能力的...
最后,文章还介绍了Skywalking的使用技巧,包括如何配置监控项、分析监控数据、定位性能瓶颈等,帮助用户更好地利用Skywalking进行应用性能管理。 Skywalking是一个优秀的国产开源框架,由华为开发者吴晟在2015年...
性能调优有时被称为“黑色艺术”,因为有时有效地调整一个系统,要求具有更深层次的知识,且需要了解一个系统的硬件和软件组成以及系统之间的相互作用。性能优化是针对特定环境来定制系统的配置过程,或者是让某个...
Linux系统的性能测试与性能分析1性能测试简介性能测试的过程就是找到系统瓶颈的过程。性能测试(包括分析和调优)的过程就是在操作系统的各个子系统之间取得平衡的过程。 RevisionHistory Version ...