ake9527 发表于 2010-1-4 11:20:47

性能测定中求取 受多个因素影响的性能目标值的峰值时 的注意点

<P>&nbsp; 当想要测量受多个因素影响的性能目标的峰值的时候,如何设计测试用例,</P>
<P>测试数据以期使用尽量小的代价(时间上)获得尽量逼近真实值的性能峰值</P>
<P>是需要考虑的。</P>
<P>&nbsp;</P>
<P>&nbsp; &nbsp;如果同时变动数个因素的取值,综合测试性能目标的峰值,则耗时较多且</P>
<P>测量结果分析困难,趋势不明显。 开始考虑每次测量只变动诸因素中的一个</P>
<P>,其他因素固定,求得峰值时的该因素取值,如此多此后,确认各因素单独变</P>
<P>动时测量目标取峰值时该因素的取值,然后使用各个因素峰值时取值即可得</P>
<P>到测量目标的峰值。 上述想法看似合理,其实忽视了各个因素之间的内在联系。</P>
<P>&nbsp;</P>
<P>&nbsp; 比如在对opensuse11上管道传输带宽的性能测定中发现并发数 2 ,读写总量</P>
<P>&nbsp;(-无影响),读写片128kb,预热时间 (-无影响), 重复执行次数 (-无影响)时可</P>
<P>分别取得峰值,则认为bw_pipe -m 131072 -P 2测试用例可取得带宽传输的峰</P>
<P>值。但其实不然。</P>
<P>&nbsp;</P>
<P>&nbsp; &nbsp;在上述测试之后,针对并发数和读写片大小进行里联立变更测定,即针对变化</P>
<P>的并发数(从1到20),在每一个并发数取值下变更读写片大小(从1kb到10M),这</P>
<P>样就得到一个二维曲面,其中发现带宽值超过2000mb/s的一个(并发度从1~3,</P>
<P>读写片50KB~250KB)的区域,且最终测得的峰值在并发度为3,读写片大小为256kb</P>
<P>的地方,峰值为2030.67,而原先以为的读写片为2,读写片大小为128kb的地方只取</P>
<P>得2021.27mb/s,抛开些许误差的影响,也可以看出原先认为各个取得峰值的因素取</P>
<P>值堆积在一起就可取的最终测试对象峰值的想法有失偏颇,尤其是在峰值精度要求较</P>
<P>高的时候,一定应辅以关键因素的联立变更测试。</P>
页: [1]
查看完整版本: 性能测定中求取 受多个因素影响的性能目标值的峰值时 的注意点