软件测试的通过标准

robertwang

大家好！

    公司正在进行IPD流程规划，需要制定在TR4阶段集成测试（我们是由测试完成）以及TR5阶段验收测试的测试通过标准。在网上看到了一些关于五级bug等级的控制等标准，但是感觉都没有很系统的构建。希望有在大公司实际进行测试工作的高人帮帮忙，最好有一套系统的说明。我这里的一些资料也可以与大家分享。注：我们是做通信软件平台的。

peter.zheng

对于你这个问题，我想问的是，你是问BUG的管理呢，还是 测试完成准则？
以下是常用的几种标准，也可以结合着用吧，我觉得以BUG密度来看和测试用例的规则比较好一点：
        测试何时结束？
        一、基于测试用例的规则
        （1）先构造测试用例（并请有关人员进行评审）。
        （2）在测试过程中，当测试用例的不通过率达到20％时，则拒绝继续测试，待开发人员修正软件后再进行测试。
        （3）当功能性测试用例通过率达到100％，非功能性测试用例通过率达到90％时，允许正常结束测试。
                该规则的优点是适用于所有的测试阶段，缺点是太依赖于测试用例。如果测试用例非常糟糕，那么该规则就失效了。
        二、基于“测试期缺陷密度”的规则
        把测试一个CPU小时发现的缺陷数称为“测试期缺陷密度”。绘制“测试时间－缺陷数”的关系图，如果在相邻n个CPU小时内“测试期缺陷密度”全部低于某个值m时，则允许正常结束测试。例如n大于10，m小于等于1。该规则比较适用于系统测试阶段。
        三、基于“运行期缺陷密度”的规则
        把软件运行一个CPU小时发现的缺陷数称为“运行期缺陷密度”。绘制“运行时间－缺陷数”的关系图，如果在相邻n个CPU小时内“运行期缺陷密度”全部低于某个值m时，则允许正常结束测试。例如n大于100，m小于等于1。该规则比较适用于验收测试阶段，即客户试运行软件期间。

robertwang

感谢您的回复。
第一个规则我们会引用，作为敏捷测试的要求。后两个规则，暂时还不打算使用。
但是，作为TR4的过点标准，怎么样更全面，具体？现在能够想到过点标准仅有：一二级遗留缺陷不存在，三级缺陷不超过用例的2%，四级缺陷不超过用例的4%；用例覆盖率达到100%；BUG收敛级数几点。感觉，这些作为一个部门的过点标准有些少。
还有，就TR4阶段的系统集成测试与TR5阶段的验收测试之间，过点标准上面还有哪些更细致的差别，也没有想好。
BTW：我们TR4是虚拟机测试；TR5阶段是产品测试。

robertwang

要求是完成“测试完成准则”，但我是想将bug管理引入进去。