软件性能测试分析与调优技术总结

lsekfe

一、性能分析与调优思想
　　1、性能分析调优模型
　　性能测试除了为获取性能指标外，更多是为了发现性能瓶颈和性能问题，然后对性能问题和瓶颈进行分析和调优，在当今互联网高速发展的时代，性能调优的模型可以归纳总结如下图所示。

　　系统模型中相关的组件描述如下表所示：

　　上图中的系统模型是一个互联网中常见的用户请求的分层转发和处理的过程，在性能调优时就是不断采集系统中的性能指标以及系统模型中各层的资源消耗，从中发现性能瓶颈和性能问题，然后对瓶颈和问题进行分析诊断来确定性能调优方案，最后通过性能压测进行验证调优方案是否有效，如果无效继续重复这个过程进行性能分析，直到调优方案有效，瓶颈和问题得到解决。这个过程一般是非常漫长，因为很多时候性能调优方案往往不是一次就能有效或者一次就能解决所有的瓶颈和问题，或者解决了当前的瓶颈和问题，但是继续性能压测又可能会出现新的瓶颈和问题。
　　2、性能分析与调优思想
　　2.1、分层分析
　　分层分析指的就是按照系统模型以及系统架构分层按照调用链进行监控分析和问题排查，如下图所示。

　　分层排查一般需要对系统的应用架构层次以及部署架构非常的熟悉，需要熟悉请求的处理链过程。
　　分层排查一般需要对每一层建立checklist，然后按照每层的checklist逐一进行分析。
　　分层排排查效率较低，但是往往能发现更多的性能问题。
　　分层排查可以自上而下也可以自下而上。
　　2.2、科学论证
　　科学论证一般包括发现问题、问题假设、预测、试验论证、分析这5个步骤，如下图所示。

　　发现问题：指通过性能采集和监控，发现了性能瓶颈或者性能问题，比如并发用户数增大后TPS并不增加、每台应用服务器的CPU消耗相差特别大等。
　　问题假设：指根据自己的经验判断，假设是某个因素导致了出现瓶颈和问题。
　　预测：指根据问题假设，预测可能出现的一些现象或者特征。
　　试验论证：根据预测，去检查预期可能出现的现象或者特征。
　　分析：根据获取到的实际现象或者特征进行分析，判断假设是否正确，如果不正确，就重新按照这个流程进行分析论证。
　　科学论证法进行性能分析与调优的示例如下图所示。

　　2.3、问题追溯与归纳总结
　　（1）、问题追溯分析指的是根据问题去追溯最近系统或者环境发生的变化，一般适用于生产已上线系统的版本发布或者环境变动导致的性能问题，问题追溯的步骤一般如下图所示，问题追溯分析是通过在追溯和描述中去逐步排查可能导致问题的原因。

　　（2）、归纳总结指的根据经验的总结，在出现某种性能瓶颈或者性能问题时根据以往总结的原因进行逐一排查。
　　二、性能调优技术
　　1、缓存调优
　　互联网高速发展的这个时代，缓存使用已经成为了很多大型系统或者电商网站使用的一个关键技术，合理的设计缓存直接关系到了一个系统或者网站的并发访问能力和用户体验。网站按照存放地点的不同可以分为用户端缓存和服务端缓存，如下图所示。

　　缓存调优的关键点说明如下：
　　如何让缓存的命中率更高？
　　如何注意防止缓存穿透？
　　如何控制好缓存的失效时间？
　　如何做好缓存的监控分析？比如slowlog分析、连接数监控、内存使用监控。
　　如何防止缓存雪崩？缓存雪崩指的是服务器在出现断电等极端异常情况后，缓存中的数据全部丢失，导致大量的请求全部需要从数据库中直接获取数据从而数据库压力过大造成数据库崩溃，防止缓存雪崩需要注意：
　　（1）要处理好缓存数据全部丢失后，如何能快速把数据重新加载到缓存中。
　　（2）缓存数据的分布式冗余备份，当出现数据丢失时，可以迅速切换使用备份数据。
　　2、同步转异步推送
　　同步：指的是系统收到一个请求后，在该请求没有处理完成时，就一直不返回响应结果，直到处理完成了才返回响应结果，如下图所示。

　　异步：与同步相比，异步指的是系统收到一个请求后，只立即返回请求调用方请求接收成功，在请求处理完成后，再异步推送处理结果给调用方，或者请求调用方在间隔一定时间再重新来获取请求结果。如下图所示。

　　同步转异步主要是解决同步请求时的阻塞等待，一直处于阻塞等待的请求，往往会造成连接不能快速释放，从而导致高并发处理时，连接数不够用，通过队列异步接收请求后，请求处理方再进行分布式的并行处理，从而达到处理能力扩展，并且网络连接也可以快速释放。
　　3、拆分
　　拆分指的是将系统中的复杂的业务调用拆分为多个简单的调用，如下图所示，一般遵循的原则如下：
　　对于高并发的业务请求调用都单独拆分为单个的子系统应用。
　　对于并发访问量接近的业务，可以按照产品业务进行拆分，相同的产品业务都归类到一个新的子系统中。

　　系统拆分带来的好处就是高并发的业务不会对低并发业务的性能造成影响，而且系统在硬件扩展时，也可以有针对性的进行扩展，避免资源的浪费。
　　4、任务分解与并行计算
　　任务分解与并行计算指的是将一个任务拆分为多个子任务，然后将多个子任务并行进行计算处理，最后只需要再将并行计算的结果合并在一起返回即可。目的是通过并行计算的方式来增加处理性能，如图所示。

　　另外对于包含多个处理步骤的串行任务，也可以尽量按照如下图所示的方式转换为并行计算处理。

　　5、索引与分库分表
　　索引指应用程序在查询时，尽量走数据库索引查询，数据库表在创建时也尽量对查询条件的字段建立合适的索引，这里强调一定是合适的索引，如果索引建立不合适，不仅对查询效率没有任何的帮助，反而会使数据库表在插入数据时变的更慢，因为一旦建立了索引后，数据在插入时，索引也会自动更新，这样就加大数据库的插入时的资源消耗。比如数据库表中有一个字段为“status”，而“status”的取值只有0、1、2三个值，这时候如果对“status”建立索引，对查询效率就没有任何帮助，因为“status”字段的值只有1、2、3这三个值，建立索引后根据“status”去检索时，需要扫描的数据还是非常的大，因为“status”字段的取值范围太少，过滤出来的数据量还是非常的庞大。
　　正确的使用索引可以很好的提高查询效率，但是如果一个表的数据量非常的庞大，比如达到了亿万级别了，此时索引查询很慢了，并且新数据插入时也很慢，此时就需要对数据进行分表或者分库了，分库一般指的是一个数据库的存储已经很大了，查询和插入时I/O消耗非常大，此时就需要将数据库拆分成2个库来减轻读写时I/O的压力，如下图所示。

　　常见的分库分表方式如下：
　　按照冷热数据分离的方式：一般将使用频率非常高的数据称之为热数据，查询频率较低或者几乎不被查询的数据称之为冷数据，冷热数据分离后，热数据单独存储，这样数据量就会下降下来了，查询的性能自然也就提升了，而且还可以更方便的单独针对热数据做I/O的性能调优了。
　　按照时间维度的方式：比如可以按照实时数据和历史数据分库分表，也可以按照年份、月份等事件区间进行分库分表，目的是尽可能的减少库表中的数据量。
　　按照一定的算法计算的方式：此种方式一般适用于数据都是热数据的情况，比如数据无法做冷热分离，所有的数据都经常被查询，而且数据量又非常的大。此时就可以根据数据中的某个字段做算法计算（注意的是这个字段一般是数据查询时的检索条件字段），使得数据能均匀的落到不同的分表中去，查询时再根据查询条件字段做算法计算就可以快速的定位到是需要到哪个表中去进行查询。
　　数据分库分表后，带来的另一个好处就是，如果单次查询时，需要查询多个分表，那么此时就可以通过多线程并行的方式去查询每个分表，最后对每个分表的查询结果做一次合并即可，这样也可以使得查询的效率更高。