51Testing软件测试论坛

标题: 【关于如何解决QTP后期运行速度】 [打印本页]

作者: 假装不在 时间: 2008-9-11 12:11
标题: 【关于如何解决QTP后期运行速度】
【关于如何解决QTP后期运行速度】
目前项目中的QTP脚本运行速度，会随着时间的增长而脚本的速度降低，特别是跑了7，8个小时后这种情况越是明显。脚本主要偏向描述的使用，对象库为辅。导致了其中的原因个人分析大概有一下几点：
1，PC机本身的问题。有时候更糟糕的是提示虚拟内存不足(2G物理内存3G虚拟内存)。大家都有这样的感觉，就算不跑QTP，PC机在自己运行一段时间后，操作响应速度会很明显下降，这个和机器性能有很大关系，一台服务器与一台PC机器跑一个晚上的脚本第2天会发现PC机的程序已经跑不动了，即使有做脚本错误恢复处理，包括重启IE，设置标签等方法再跑，但还是跑不动。

      2，系统庞大，如果大概有2100个不同web页面，当脚本跑不到一半时候速度也会明显下降，系统的临时文件，cookies等的增多，所导致的响应速度降低，会出现IE呈现白色page不无法操作的情况。

      3，脚本在编写过程，忽略对对象的释放操作,这个或者是非程序员的一个通病吧，因为在小的程序或者脚本中，对象释放与否看不出什么效果，但小数怕长计，也会导致QTP本身所占用的系统资源增多。

      4，脚本编写思想。脚本中过度偏向递归使用，深度越大，函数调用与递归增多，对象增多等，会导致QTP到后期时候速度会有所回落，有时也会让QTP出现假死状态，有可能是内存溢出的情况发生。

      5，过分依赖错误处理与智能对象识别。或者很多人说，智能识别不推荐使用，但是，当一个脚本和滚雪球一样，递归也多了，程序的可控性就降低，跟踪难度增大，脚本的维护成本就增多，所以选择维护与开启智能识别时候，后者有更大的优势。由于依靠了智能识别，有时候一些结果报告中会看到很多对象识别不到而懒得去找原因。积累多了问题也会慢慢浮现出来。

      6，网页访问残留，比如说你的表单提交后再回退时，表单里填写的数据还在，这些就是残留在内存里的数据，但一般来说残留量是非常少的。

      所以如何在QTP的运行过程中，及时的释放系统资源有着很重大和深远的意义。

经过和大家讨论的结果还有与实际的结合，反复测试等到：
1，引起问题的主要是QTP，IE的内存无法很有效的释放导致
2，脚本问题
3，AJAX技术的使用

解决方法：
  1，使用工具是不可能的了，这个本人已经测试过了。QTP，IE都无法删除。只有在代码中实现内存的回收：
   大家可以参见http://topic.csdn.net/u/20070501 ... 6-87a645e75cfd.html
   自然，我们不是开发，无法做到在QTP运行过程中实现这样的效果
  2，最小化IE！！这点绝对是可以用的，我刚才已经测试过，占用40M的，最小化后，成了2M，然后再做恢复，变成了21M左右，再做操作才慢慢在21M有序的增加。
   所以大家在写代码过程，如果有意识到脚本的IE内存可能没法很好的回收，可以写个最小化再做回复的操作函数。[/size]

[ 本帖最后由假装不在于 2008-9-17 16:30 编辑 ]

作者: 假装不在 时间: 2008-9-11 12:11
在这里做下抛砖引玉，希望和大家讨论讨论，有很多不足处望大家指点指点

作者: lantianwei 时间: 2008-9-11 14:38
写的非常不错，支持一下！

好像没提到解决办法啊

作者: 假装不在 时间: 2008-9-11 14:52

原帖由 lantianwei 于 2008-9-11 14:38 发表
写的非常不错，支持一下！
好像没提到解决办法啊

标题是讨论，嘿嘿。
目前解决的方法：1，重启服务器IIS，但是这个过程会让测试停止。
2，清理本机的IE文件
3，利用外部程序实现间断清理（我记得超级兔子有个可以做到内存清理的工具）

作者: xiaoyaoke 时间: 2008-9-11 17:35
1.为什么要重启IIS呢？想不明白重启IIS和本机QTP执行脚本速度慢有什么直接的联系啊；
2.清理本机的IE文件有啥用呢？本机的IE文件只不过占用的磁盘空间，貌似也和QTP执行脚本速度没有直接联系吧；
3.利用外部程序实现间断清理：这个觉得的确会对提高运行速度有一定帮助，但问题是QTP这么娇嫩的软件，谁敢在它跑的时候频繁清理内存？谁又能保证不出错呢？呵呵

作者: 假装不在 时间: 2008-9-12 10:13

原帖由 xiaoyaoke 于 2008-9-11 17:35 发表
1.为什么要重启IIS呢？想不明白重启IIS和本机QTP执行脚本速度慢有什么直接的联系啊；
2.清理本机的IE文件有啥用呢？本机的IE文件只不过占用的磁盘空间，貌似也和QTP执行脚本速度没有直接联系吧；
3.利用外部程序实 ...

1，同个IE做的2000多次的页面跳转，如果IE没关闭，哪么IIS里的一些连接没有断开就资源没释放，导致了服务器响应时间增长。这个或者是程序写的不完善也有关系，应用程序很多资源没有释放导致。
2，占磁盘控件确实是，但也不大，也就哪么几M，但同个IE经过2000次的页面跳转，到了后期页面变白，我能想到的就只有这点了，或者这个会和第三点有关系。
3，使用外部程序，这个对QTP是否有影响，还是要以后日子慢慢验证。

作者: happychap 时间: 2008-9-12 11:55

原帖由 假装不在 于 2008-9-12 10:13 发表

1，同个IE做的2000多次的页面跳转，如果IE没关闭，哪么IIS里的一些连接没有断开就资源没释放，导致了服务器响应时间增长。这个或者是程序写的不完善也有关系，应用程序很多资源没有释放导致。
2，占磁盘控件确实 ...

这方面，应该与你自己编写的脚本有关吧，你可以把一个Test割成多个Test来做啊。

作者: 假装不在 时间: 2008-9-12 12:09

原帖由 假装不在 于 2008-9-12 10:13 发表

1，同个IE做的2000多次的页面跳转，如果IE没关闭，哪么IIS里的一些连接没有断开就资源没释放，导致了服务器响应时间增长。这个或者是程序写的不完善也有关系，应用程序很多资源没有释放导致。
2，占磁盘控件确实 ...

脚本问题不大。早期运行速度相当的快，时间越长，脚本的速度越下降。
在找原因了，现在个人基本确定2个问题，1，浏览器占内存问题，这个下午2点后就有结果。2，服务器IIS问题。
我只有一个TEST，理论上这个如果最快的速度跑完，也要10个小时。

作者: 假装不在 时间: 2008-9-12 13:43
中午测试时候发现，脚本在开跑，IE占的内存是：41004，跑了2个小时后，内存占的是143728
使用内存整理工具无效。
刷新页面后让内存减少到38147
这个可能是页面变白，假死的主要原因。

作者: xiaoyaoke 时间: 2008-9-12 16:50
建议LZ关注下被测试程序：

关于IIS和脚本，我感觉如何是这两者的原因都不应该引起IE进程占用内存量增加

作者: heqingbluesky 时间: 2008-9-16 14:23
是否是临时文件过多，我们在测试C/S结构的程序也发现，系统会有莫名其妙的问题，是由于被测试的程序在系统安装盘下的Temp目录，放置了很多的文件，这些文件在被测试的软件关闭后也不会被清理掉。

这个问题在测试安装/卸载的过程中，不同版本的临时文件过多，导致被测试程序的相应时间过久，磁盘空间占用过多的问题。

作者: 假装不在 时间: 2008-9-16 15:50

原帖由 heqingbluesky 于 2008-9-16 14:23 发表
是否是临时文件过多，我们在测试C/S结构的程序也发现，系统会有莫名其妙的问题，是由于被测试的程序在系统安装盘下的Temp目录，放置了很多的文件，这些文件在被测试的软件关闭后也不会被清理掉。

这个问题在测试安 ...

这些都是不排除的因素。

作者: ppent 时间: 2008-9-16 15:59
标题: 回复 9# 的帖子
个人估计：
1、由于长时间的运行，IE页面资源没有有效释放，从而页面上的对象很多，造成响应上的缓慢
2、楼主的脚本大量使用描述性编程，在页面对象众多时造成对象查找缓慢。楼主可从qtp的log中看运行效率慢在哪里。
建议在测试执行一段时间后，关闭并重新打开IE，或许可以避开该问题。

作者: 假装不在 时间: 2008-9-16 16:08

原帖由 ppent 于 2008-9-16 15:59 发表
个人估计：
1、由于长时间的运行，IE页面资源没有有效释放，从而页面上的对象很多，造成响应上的缓慢
2、楼主的脚本大量使用描述性编程，在页面对象众多时造成对象查找缓慢。楼主可从qtp的log中看运行效率慢在哪里 ...

虽然关闭IE可以解决这个问题，因为业务逻辑的问题还有页面信息恢复难度大，重启IE是个下策。（我脚本的“恢复功能”中也有做到这点，但恢复到重启前数据，时间长，到头来页面的缓存信息还是少不了多少）

作者: heqingbluesky 时间: 2008-9-17 10:20
我曾经记得在测试B/S结构的测试时候，在IE中有个设置：
Tool－Temporary Internet File－Settings－Check for newer stored page选项，选择：Every visit to the page选项
这样，每次访问页面的时候，可以进行自动的刷新，不知道这个办法是否可以加速？

重启IE是个下策，特别是当测试的页面的信息量比较大，页面的关联性比较强，这样会有一些其它的问题。

作者: 假装不在 时间: 2008-9-17 10:55
我试了下，不行，内存还是照样增加得厉害。

作者: heqingbluesky 时间: 2008-9-17 11:20
还有一个方法:
在每个Workflow工作完以后，也就是一个Case运行完毕后，清空被测试的程序，让程序回到Case运行前的状态，这个工作是通过调用一个Batch（VBS）文件来完成了。
不知道这样不是通过IE，而是通过脚本强制清空，是否可以解决？

作者: 假装不在 时间: 2008-9-17 12:15

原帖由 heqingbluesky 于 2008-9-17 11:20 发表
还有一个方法:
在每个Workflow工作完以后，也就是一个Case运行完毕后，清空被测试的程序，让程序回到Case运行前的状态，这个工作是通过调用一个Batch（VBS）文件来完成了。
不知道这样不是通过IE，而是通过脚本强制 ...

我现在感觉，那些临时文件不是多大的问题，个人觉得内存才是主要的诱因。

作者: nanice 时间: 2008-9-17 12:45
关注楼主，你遇到的问题，我这也正在发生…………

作者: xiaoyaoke 时间: 2008-9-17 14:57
1、由于长时间的运行，IE页面资源没有有效释放，从而页面上的对象很多，造成响应上的缓慢
深表认同

作者: xiaoyaoke 时间: 2008-9-17 14:59
2、楼主的脚本大量使用描述性编程，在页面对象众多时造成对象查找缓慢。
不认同，大量的描述性编程，在页面对象众多时造成对象查找缓慢，这个应该是造成QTP本身吃内存而不是造成IE。

作者: 假装不在 时间: 2008-9-17 15:48

原帖由 xiaoyaoke 于 2008-9-17 14:59 发表
2、楼主的脚本大量使用描述性编程，在页面对象众多时造成对象查找缓慢。
不认同，大量的描述性编程，在页面对象众多时造成对象查找缓慢，这个应该是造成QTP本身吃内存而不是造成IE。

这个问题有区别于IE页面变白的那个问题。
我现在发现很恐怖，哈哈，一个页面有同个webelement，基本信息，不确定，变动很大，而且考虑到通用的情况，我使用了INDEX，而正好，页面有1000个index的情况。
页面前300个INDEX查找速度很快，但慢慢速度下降，你说的是QTP占内存的原因，我也觉得这点我觉得应该是。
操作：
1，QTP对页面操作，从第300个开始操作，速度和第1个开始速度一样。
2，如果从第1个到300个时候，300个的操作速度明显没有1个快
3，在跑到第300个时候，做IE重启恢复的操作，QTP的页面出现了有点假死的情况
这个现象，很直观给我们的感觉是QTP的问题，但QTP查找对象的原理是否会涉及到IE的一些非直观因素，例如缓存之类的呢？

嘿嘿，中午写了个更会方便的恢复方法，可以很快恢复前面流程留下的场景而又不让IE的内存等提高。这个是业务方面的问题，和技术没多大关系，所以不便公开代码。

作者: 假装不在 时间: 2008-9-17 16:32
主题已经编辑了一次，现在写了解决办法，不过没有涉及到QTP的内存释放

作者: xiaoyaoke 时间: 2008-9-18 09:09
建议一本书《深入理解计算机系统》
现在高级语言风靡，接触底层的机会越来越少，但还是希望大家有时间的时候能够看看，个人感觉挺有帮助的

作者: 假装不在 时间: 2008-9-18 09:27

原帖由 xiaoyaoke 于 2008-9-18 09:09 发表
建议一本书《深入理解计算机系统》
现在高级语言风靡，接触底层的机会越来越少，但还是希望大家有时间的时候能够看看，个人感觉挺有帮助的

我昨天后来再研究了下，估计QTP可以帮页面做内存释放（没用的变量之类），这个需要再研究下。

作者: heqingbluesky 时间: 2008-9-18 10:45
如果是内存释放的问题，多跟编程的习惯有关系。
是否存在过期的数据库连接没有释放
是否存在打开的文件没有关闭
是否变量在命名后并没有实际的使用
是否在使用Function的时候，递归调用的层次比较多
………………

作者: xiaoyaoke 时间: 2008-9-18 10:46
“我昨天后来再研究了下，估计QTP可以帮页面做内存释放（没用的变量之类），这个需要再研究下。”
我不这么认为的：
首先QTP在我的理解就是封装了N多其它辅助功能的VBS脚本解释器，这里谈到帮助IE进行内存整理，问题是VBS中这种语言能够管理内存吗？所以如果要实现用QTP去整理IE内存，那么就要再写一个内存清理的工具（用支持内存管理的语言）然后VBS调用；
其次，进程的理念是现在操作系统的巨大进步，IE在运行中是独立的进程，而QTP虽然控制着IE的运行，但这种控制是应用级控制吧，这两个进程之间没有从属关系，既然如此，在进程的理念中独立的进程间资源是独占的吧，也就是除了进程本身有权限在运行中整理自己的内存空间，其它的程序有这个权限去管理它的资源吗？（操作系统除外）

作者: 假装不在 时间: 2008-9-18 11:28

原帖由 xiaoyaoke 于 2008-9-18 10:46 发表
“我昨天后来再研究了下，估计QTP可以帮页面做内存释放（没用的变量之类），这个需要再研究下。”
我不这么认为的：
首先QTP在我的理解就是封装了N多其它辅助功能的VBS脚本解释器，这里谈到帮助IE进行内存整理，问 ...

我的理念是帮页面做变量释放。究竟意义会不会比做最小化操作来得更大些，要看它的成本了。
如果说帮IE做内存清理，我个人说这点不大可能。
因为这个是IE自己的机制问题，上一个页面，它的会保存一些类似表单的东西，““如果能实现这样的清理工作，哪么我们点后退后，会发现刚才的那些表单记录都没了””，好像这是不可能的。
所以要么就每个页面都做一次清理操作，要么就最小化。

“QTP在我的理解就是封装了N多其它辅助功能的VBS脚本解释器”这个就是我利用的地方，先尝试可以调用或者重定义web中的函数不。
置于用自定义函数实现页面元素增加，我已经做到了。

可以拿开发员来开下玩笑。

作者: rcpp 时间: 2008-9-18 11:30
标题: 回复 27# 的帖子
呵呵，忘记wmi了吧

作者: 假装不在 时间: 2008-9-18 11:31

原帖由 heqingbluesky 于 2008-9-18 10:45 发表
如果是内存释放的问题，多跟编程的习惯有关系。
是否存在过期的数据库连接没有释放
是否存在打开的文件没有关闭
是否变量在命名后并没有实际的使用
是否在使用Function的时候，递归调用的层次比较多
…………… ...

你总结的很好。
至于数据库连接释放这个我没考虑到，谢谢你的回复。

作者: 假装不在 时间: 2008-9-18 11:33

原帖由 rcpp 于 2008-9-18 11:30 发表
呵呵，忘记wmi了吧

wmi不能忘

，太销魂了。

作者: 水知寒 时间: 2008-9-18 11:46

作者: xiaoyaoke 时间: 2008-9-18 11:51
标题: 回复 29# 的帖子
WMI可以管理内存吗？
呵呵，这个没用过，我经常用它或许一些系统信息

作者: heqingbluesky 时间: 2008-9-19 10:52
WMI可以进行管理内存，我目前不知道如何使用，可以让RCPP给我们说明一下，洗耳恭听

。
我们一般使用WMI，都是用它来获取计算机的信息，例如：进程信息，以便我们可以Kill掉它，在系统出错或者崩溃的时候。

作者: 假装不在 时间: 2008-9-19 11:55

看来RCPP的一个回复引起了大家的关注呀...

作者: nanice 时间: 2008-9-19 12:43
几个高手在一起探讨的问题，果然能给人很大的启迪，哈哈！继续继续……

作者: walker1020 时间: 2009-2-22 13:06
各位对解决QTP后期运行速度慢的问题进行了深入讨论，对减少测试时间、提高测试效率非常有帮助意义。

作者: 南勃万 时间: 2011-3-9 14:18
感觉以后有用，标记一下

作者: JF贰 时间: 2014-3-13 16:37
之后的工作也会面临到这个问题，看到这些讨论，感觉收获良多，不过，还未实践。先标记一下

欢迎光临 51Testing软件测试论坛 (http://bbs.51testing.com/)