在 Zen And The Art Of Scaling - A Koan And Epigram Approach 一文中, Russell Sullivan 提出一个很有趣的设想:一共有20种经典的瓶颈。这听起来就像只有20种基本的故事情节(20 basic story plots)那样让人怀疑。不过基于每个人不同的分类方式,这个说法或许是对的,但是在现实中,众所周知,瓶颈是无穷无尽的而且涉及方方面面。
一天, 来自 Terracotta 的 Aurelien Broszniowski 给我电邮了一份他心中的瓶颈列表,我们同时把我们的邮件抄送给了Russell, 他也给出了他的列表。而我也有我自己的想法。 所以,下面就是这几碗水煮成的一锅石头汤( http://en.wikipedia.org/wiki/Stone_soup, stone soup典故)
Russell 说要是年轻的时候就知道这些该多好啊,而对我来说则可以提供更多的思路。你的经验越多,处理过不同类型的项目,你就可以给这个列表增加更多的内容。因此当你在阅读这个列表时,或者是在整理自己的列表时,多年的丰富经验的积累以及遇到的一些小挫折,每一个故事都值得进行总结。
数据库
- 工作中数据大小超过可用内存 RAM
- 长短查询混合
- 写-写 冲突
- 大的联合查询占光内存
虚拟化
- 共享 HDD 存储,磁盘寻道挂起
- 云平台中的网络 I/O 波动
编程
- 线程:死锁、相对于事件驱动来说过于重量级、调试、线程数与性能比非线性
- 事件驱动编程:回调的复杂性、函数调用中如何保存状态(how-to-store-state-in-function-calls)
- 缺少profile工具、缺少trace工具、缺少日志工具
- 单点故障、横向不可扩展
- 有状态的应用
- 搓设计:一台机器上能跑,几个用户也能跑,几个月后,几年后,尼玛,发现扛不住了,整个架构需要重写。
- 算法复杂度
- 依赖于诸如DNS查找等比较搞人的外部组件
- 栈空间
磁盘
- 本地磁盘存取
- 随机磁盘读写 -> 磁盘寻道
- 磁盘碎片化
- 写入超过SSD容量的数据导致SSD硬盘性能降低
操作系统
- 内核缓冲刷入磁盘,填充linux缓冲区缓存
- TCP缓冲区过小
- 文件描述符限制
- 功率分配
缓存
- 不使用memcached
- HTTP中,header,etags,不压缩(headers, etags, not gzipping)
- 没有充分使用浏览器缓存功能
- 字节码缓存(如PHP)
- L1/L2缓存,这是个很大的瓶颈。把频繁使用的数据保持在L1/L2中。设计到的方面很多:网络数据压缩后再发送,基于列压缩的DB中不解压直接计算等等。有TLB友好的算法。最重要的是牢固掌握以下基础知识:多核CPU、L1/L2,共享L3,NUMA内存,CPU、内存之间的数据传输带宽延迟,磁盘页缓存,脏页,TCP从CPU到DRAM到网卡的流程。
CPU
- CPU 过载
- 上下文切换 -> 一个内核上跑了太多的线程,linux调度对于应用来说很不友好, 太多的系统调用, 等等...
- IO 等待 -> 所有的CPU都挂起等待比较慢的IO
- CPU 缓存: 缓存数据是一个为了平衡不同实例有不同的值和繁重的同步缓存数据保持一致,而精心设计的一个进程。
- 背板吞吐量
网络
- 网卡的最大输出带宽,IRQ达到饱和状态,软件中断占用了100%的CPU
- DNS查找
- 丢包
- 网络路由瞎指挥
- 网络磁盘访问
- 共享SAN(Storage Area Network)
- 服务器失败 -> 服务器无响应
过程
- 测试时间 Testing time
- 开发时间 Development time
- 团队人数 Team size
- 预算 Budget
- 代码缺陷 Code debt
内存
- 内存溢出 -> 杀进程,进入 swap ,越来越慢
- 内存溢出导致磁盘频繁读写(swap相关)
- 内存库开销
- 内存碎片
- Java 需要垃圾收集导致程序暂停
- C 语言的 malloc 无法分配
相关推荐
找出系统性能瓶颈:企业级系统性能分析实践 v3.0.pdf
MOMO陌陌高永芝在2017PHP全球开发者大会上做了主题为《复杂PHP系统性能瓶颈排查及优化》的演讲,就PHP系统数据筛选及统计,可视化性能指标,搞笑优化方案做了深入分析。
使用JProfiler结合LoadRunner寻找系统性能瓶颈
BOSS数据库系统性能瓶颈分析和定位.pdf
一款能分析系统性能瓶颈的优化软件。它通过对系统全方位的诊断,找到系统性能的瓶颈所在,然后有针对性地进行修改、优化。此外它还具有间谍软件和恶意软件扫描清除功能,也能将你的隐私信息从电脑中抹除。
网络游戏-一种新型云计算技术解决通信行业网络系统性能瓶颈的方法.zip
Advanced WindowsCare Personal 2.9.0.866印心绿色单文件版_分析系统性能瓶颈
* 轻松发现和消除性能瓶颈 * 查找问题代码 * 节省后续硬件及开发投入 * 增加应用发布信心 * 与开发过程集成,改善应用性能 JProbe Suite是一种能节省开发时间、降低开发费用、改善Java应用运行速度及和扩展能力的...
LoadRunner,是一种预测系统行为...接下来给大家讲一下有关在使用JProfiler结合LoadRunner寻找系统性能瓶颈LoadRunner:加压JProfiler:监控1JProfiler是做什么的?JProfiler工具主要用于检查和跟踪系统(限于Java开发
分享与大家分享一下真是一个清理软件 很好的电脑维护数据恢复软件 拿出来与大家分享 呵呵
性能测试中如何定位性能瓶颈,对一些常见衡量CPU,内存,磁盘的性能指标,进行综合分析,然后根据所测系统具体情况,进行初步问题定位,然后确定更详细的监控指标来分析。
NULL 博文链接:https://utopiasky.iteye.com/blog/630990
找出系统性能的瓶颈:企业级系统性能分析实践
#资源达人分享计划#
精品专题课件(2021-2022年收藏)
然后我会介绍常见的分析及监控系统资源时使用的工具,这个环节应该是最主要的,最后我会举一个实际发生过的系统性能瓶颈分析和优化的案例,作为一个实践和总结。 本文涉及的内容基于Gnu/Linux系统平台,但关于性能...
一、什么叫做性能测试 对被测系统在一定的负载压力下,监控各项指标(CPU、内存、相应时间)是否符合需求,如果不符合就...2、通过测试,识别系统的弱点,评估系统能力,发现系统性能瓶颈,提高系统可靠性能和稳定性
Linux实时性能瓶颈分析.pdf