[你问我来答第14期]：CMMI评估探讨（已结束）

xiaolijust5

老师：
由于我们公司的测试正式规范起来还不到半年，许多制度还不是很完善，我想问下，我们测试什么时候介入项目比较好，为什么？我们公司是没有需求这一步的，现在的测试就是我们去问程序员需求，产生一份测试需求，但是这样很被动，最终会漏掉一些东西，但是由于测试在公司地位不是很高，直接参与到需求评审又不太可能

915SW

如何去做好自己负责的测试项目的费用预算和评估？如何权衡测试缺陷与测试质量的关系，怎样去把握这个度让开发人员和测试人员都满意？对一个系统的安全测试，大家有何好的建议，可以从哪些方面入手去测试？请指点。

千里

一个部门就一个测试人员，怎么展开工作，我所在的部门就是这样，他们根本不拿我当一回事，最后我成一打杂的 ...
zhangnanguozi 发表于 2011-8-19 11:06

    跳槽是直接而干脆的选择

liaoxj

回复28#
问题：
    cmmi评估前和评估后，epg组成员都做了哪些工作。不用说那些书本上已经写的，最好能说些你们实际EPG组对公司整体的推动和促进作用，谢谢。
大傻回复：

我觉得EPG在评估前的工作，就是全力配合咨询公司完成CMM评估，包括组织过程的定义，流程梳理，模型建立，针对项目的各种培训。我重点说评估后吧，一般公司评估后认为EPG使命完成，可能名存实亡，甚至解散了。我觉得评估后才是体现EPG的作用的时候，那么EPG要做什么，那么就是如何让项目在各种活动中，流程更简洁，模板更适用，规范更合理。评估后我认为EPG的职责首先收集过程建议，收集过程数据，完善优化过程，并监督项目过程执行。

EPG如何推动，我觉得要推动一样东西，必须具备两个基本条件，一个对对方带来好处，另一个是你有绝对的权力。我们EPG小组实际上有公司副总裁亲自带队的，所以我们具备一定的权利。

我们目前是这样做，我们EPG每年向公司申请了一笔经费，只要公司人员提出过程改进建议EPG如果采纳了，那么根据建议的评分发放奖励，而且在公司内部网站发布公告。我每年还会评比三个项目最佳标准项目，奖金很可观。项目人员发现不仅自己的工作方便了，而且还得公司的认可和物质奖励。

总结一下EPG要做得事，深入项目，不断优化过程，创新方法，要让项目所有人员感觉过程对他们带来方便，而不是感觉一直在写文档。最好能够引入一个研发项目管理工具，这样话能更好让我们收集数据。

liaoxj

回复29#
问题1
    为什么要搞CMMI？不搞行不行？
大傻回复

为什么要搞CMMI，这是公司的商业目标需要，如目前很多招标中有CMMI级别的要求或者奖励，还有些是国家有一笔可观的补贴。不搞行不行，这个不是我和你说的，这是需要你们老板和公司商业目标有没有需要。
问题2
    CMMI适用哪些软件行业？
大傻回复
     CMMI是一种用于评价软件承包商能力并帮助改善软件质量的方法，其目的是帮助软件企业对软件工程过程进行管理和改进，增强开发与改进能力，从而能按时地、不超预算地开发出高质量的软件。其所依据的想法是：只要集中精力持续努力去建立有效的软件工程过程的基础结构，不断进行管理的实践和过程的改进，就可以克服软件开发中的困难。CMMI只是一种模型，一种方法，适合所有软件行业。
问题3
    为什么GOOGLE,MS,国内的百度腾讯阿里都没有搞CMMI这一说？
大傻回复
    CMM/CMMI是目前国际上最流行、最实用的一种软件生产过程标准，已经得到了国际软件产业界的认可。GOOGLE,MS,国内的百度腾讯阿里他们自己有一套成熟的模型，只是他们不叫CMMI，没有去SEI评估而已。
问题4
   CMMI的模型中不把团队角色当人，而只是当机器。请问对这个说法怎么看？
大傻回复
   我个人认为，CMMI最高境界就是把人当作机器。你不觉得只大家都是机器了，标准执行才会更好，进度才能保障，成本才能控制，产品质量才能保证，工作效率才会高。但是事实我们做不到，因为机器都会有死机的时候，何况是人。

liaoxj

回复33#
问题1
    有什么好的方法或措施能够有效的降低系统上线缺陷，能否分享一下？
大傻回复

1.制定上线标准工作流程和检查项

我个人认为好的产品质量不是测试出来，测试只能促进产品质量。上线过程出现的问题很多时候不是产品本身质量的问题，很多时候是生产环境和部署时未严格按部署手册要求进行。如何提高预防呢，那就需要一套很好的工作流程和监督机制。当月有一套标准上线流程才能让上线风险降低，缺陷减少。

上线流程需要配合实施部门一起进行包括上线的工作步骤，工作产品，有哪些角色来做，每个步骤有哪些检查项，谁负责检查。有当出现问题的时候，我们也分析原因，来优工作流或增加修改检查项。

2.完善上线测试用例，做好回归测试

测试这块我觉得只有完善我们的测试用例，加强回归测试了。当时间紧的时候我们就项目经理或客户沟通再当前情况下，我们只能保证哪些业务流程是正确的，哪些业务流程只能保证正常操作是好，哪些功能我们是没有验证。有时我们无法面面俱到，只能保证某一块。测试主管很多时候就是做这些沟通，很多工作可以到上线以后再处理的。上线这块我非常建议大家尝试使用自动化方面的测试方法。

由于很少有机会对一个应用软件进行所有可能的测试（包括所有可能的事件组合、所有的相关性、或者一切可能出错的东西） ，对大多数软件开发项目来说，利用风险分析是适当的。这需要判断技能、常识、感觉和经验。如果有正当理由，也可采用正式的方法。需要考虑下列因素：

　　1、对于该项目的用途而言，哪种功能最重要？

　　2、哪种功能对用户最明显？

　　3、哪种功能对安全影响最大？

　　4、哪种功能对用户最有用？

　　5、对客户来说，该应用软件的哪个部分最重要？

　　6、在开发过程中，该应用软件的哪个部分可以最先测试？

　　7、哪一部分代码最复杂，容易导致出现错误？

　　8、哪一部分的应用程序是在急迫或在惊恐的情况下开发出来的？

　　9、哪一部分程序与过去项目中引起问题的部分相类似/有关？

　　10、哪一部分程序与过去项目中需要大量维护的部分相类似/有关？

　　11、需求和设计的那些部分不清楚或不容易读？

　　12、开发人员认为在应用软件中哪些部分是高风险的？

　　13、哪些问题能造成最差的发行？

　　14、哪些问题最能引起用户抱怨？

　　15、哪些测试可以容易地覆盖多种功能？

　　16、哪些测试在覆盖高风险部分的测试时使用时间最少？

问题2     
    很多资历丰富的员工都不愿意分享自己成功的工作经验，害怕被别人反超，那么如何去做好测试组的项目测试总结工作和经验分享工作？
大傻回复

我觉得出现这种情况，测试主管首先以身作则去帮带新员工，去创造这样的氛围。还要形成相应的机制，比如我们这里考核中要求一定级别的员工每年部门内部培训必须达到多少授课课时，而且作为绩效考核中一项。

我记得我在公司内部创建了一个产品业务技术群，专门找一个人负责回答问题，刚开始的那个人都快累死了，天天就是回答的问题，但是现在他几乎不用回答问题了，因为只要有人一提问，就会有人回答，他现在只要负责整理并放入知识库就行了，因为在这个群形成了一个分享的氛围。只有别获得好处了，并且离不开了，那么你就成功了。

还有一模式就是贡献型，如百度文库只有你上传文件有积分了，你才能下载文库上的东西，我觉得这也是一种很好的方式。

liaoxj

回复37#
问题
     专家好，我是刚入软件测试大门的新人，关于自学方面的能讲点吗（我主要负责平台B/S,C/S界面的功能测试）？还有作为测试人员的时间管理如何安排？谢谢
大傻回复：

我觉得自学一般情况不脱离目前工作的内容，我见过很多新人，天天想着学什么测试工具，但是从来没有项目中应用到。我觉得如果你自学的东西如果是目前公司很难应用到，那么就不要学了，如果你真有兴趣我建议你换一份工作，能够应用到他的。我觉得测试人员自学测试技术的同时，千万不要忘了学习目前公司产品的业务，将来行业专业人才会更值钱，而测试人员更需要懂业务的，而且以后职业会有更多的选择。

测试人员时间我觉得，上班的时候才把工作做好的前提下，再去学习或娱乐。时间都是有，我们不可能比国家总理忙，只是大家有没有去挤，有没有去很好的利用。自己想做的事有没有付出行动，自己定的学习计划有没有坚持下去。

yangpingbo

想请教一下LR的压力测试流程。最好是图解。

liaoxj

回复43#
问题：
    我刚刚学习自动化测试工具QTP，对使用自动化测试的能力不是特别清楚。我想请问在类似CAD画图这样的应用程序中使用QTP来测试是否可行？因为它的界面不像一般windows的程序只有几个button和box，更多线条
大傻回复：

     QTP这块我研究不多，但从我经验让看QTP更适合业务和操作相对简单的软件，像CAD这么专业的软件不大适何使用QTP来做自动化测试。

shenjun

【请教】性能测试

请问性能测试由于业务场景过多，应该如何把握尽可能多的覆盖场景，因为当前应用场景还不是很清楚用户场景，在这种情况下，应该如何去设定测试范围呢？

恳请专家给予解答，谢谢！

liaoxj

回复40#
问题：
    请问软件测试价格报价现在的行情大约是怎样的，如按代码行数、功能点和其他报价方式？谢谢
大傻回复：
    目前我没有开这样公司不清楚行情，我个人认为软件测试服务定价策略不可能做到这么细的，最多也就是需要多少人，需要多少时间作为定价策略依据。你可以问问51testing问问他们是如何做定价策略的。

liaoxj

回复44#
问题：
    我想问下用QTP怎么实现录制手机上的浏览器的脚本？
大傻回复：
    QTP通过录制手机模拟器中浏览器中产品功能，如果兼容windos浏览器那么直接录制。手机上只做兼容和功能确认方面的测试。

liaoxj

回复47#
问题：
    您好，我想问一些关于监控指标的问题，就是我们监控的一些常用的  例如IO  内存 之类的 有没有一些‘标准值’，我是新手，很多都不懂。
大傻回复：
   我51testing博客中整理过相关指标，你可以参考一下。
   性能测试杂谈之二：基础知识服务器端资源监控指标(unix)
   性能测试杂谈之三：基础知识服务器端资源监控指标(window)

AmandaMa

请问刚入测试这一行的我，最基本的应该从哪里开始呢

testingleader

学习、了解一下!

liaoxj

回复35#
问题：
     据我们公司的老员工讲，以前我们部门的测试人员几乎2年换3批，连续7年都快换15批了，呵呵！连测试负责人也在失望中离职了，这些都是公司领导决策所致的，部门负责人无法改变。在我看来，最主要是如何积累测试组的项目经验，如何去组建测试组的共享知识库？共享知识库可以包括哪些方面，可以从哪些方面去组建？能否给出比较好的，可以具体操作、实施的建议？
大傻回复：

知识库像你们这样情况想建立起来，还有真有难度，知识库需要积累和传承。知识库建立实际是一个复杂和烦索的系统工程。

如何创建测试知识库，我觉得考虑以下三方面。

1.有一个组织有序的基础框架，而便于经后扩展

建立知识库，必定要对原有的信息和知识做一次大规模的收集和整理，按照一定的方法进行分类保存，而且分类建立必须要考虑3至5年可能的扩展。如按员工类型（新员工，老员工），测试技术（功能，性能）等方面，业务知识（数字化医院，数字化社区）等。

2.建立知识库完善更新机制，让知识库流动起来

要想让知识库很那更新流动起，首先要做宣传，可以通过企业的内部网上以相当醒目的方式宣传知识库，或公司全体邮件，使能够迅速传遍整个企业，这就使人们获得新信息和新知识的速度大大加快。更新机制也要逐步完善，如员工在工作中解决了一个难题或发现了处理某件事更好的方法后，可以把这个建议提交给一个由专家组成的评审小组。评审小组对这些建议进行审核，把最好的建议存人知识库。建议中注明建议者的姓名，以保证提交建议的质量，并保护员工提交建议的积极性。

3.架立一套运行知识库的平台工具

知识库建立以后必须提供相应的检索手，那么必须要有一套很好支撑平台。我们必须对相应的知识经过这样一番处理，大量信息和知识便从原来的混乱状态变得有序化。这样就方便了信息和知识的检索，并为有效使用打下了基础。

测试知识库内容可以包括工作涉及的方面，有测试技术，开发语言，业务知识，行业知识，软件工程等。也可以是网上获取的，工作中经验总结，甚至是发现了excel中一个很好用的函数。主要是你对知识库的定义是什么。

我觉得目前的情况可以先找几个有这个意愿的同事先自己做起，刚开始甚至搞一个FTP的共享，你知道我们刚开始最初的知识库是什么就是一个FTP服务，里面是就是大家日常用到的各种工具的安装包。等到一定规模的时候可以自己搞一个类似百度文库或维基百科这样的一个网站。我还是那句话知识库的建立必需要有机制，而且要一直传承，这样才会越积越多。

zzhix

我也来凑个热闹，问专家3个问题吧！
（1）同在一个项目组，有的测试人员发现的缺陷很多，质量很高，而有的测试人员很难发现缺陷，作为测试组长，如何引导组员快速去发现软件缺陷？
（2）如何去改进或创新测试方法，不断提升测试效率，减少人的重复劳动，减少加班？能否给一些好的建议？
（3）项目测试结束后，如何搞部门活动去提高组员的凝聚力？大家都举行哪些类型活动？都怎样举行的呀？

愚人

10年的老鸟呀……
CMMI在国内多走形式

liaoxj

回复39#
问题：

上周去北京总公司开会回来，公司领导强烈要求各个部门经理或负责人做好各部门的短期和长期部门的发展规划。很不幸前面的测试经理走了，留给我一个烂摊子，以前也从没有做过部门发展规划之类的东西，网上查了一堆资料，感觉不是太实用，哎，特郁闷。今天来51testing上看了一下，还有专家提问，哈哈，终于看到救星了。
专家，请问一下，做测试部门发展规划如何做？可以从哪些方面去入手，最好有成形的文档发给我就好了？专家尽量给我多出出主意，讲述详细点，我们10月初提交部门规划的初稿，先谢哈

大傻回复：

部门发展规划如何做，肯定整个公司的发展规划和目标来做。你现在作为一个部门负责人肯定要结合这个去做，网上有很这样的文档，你觉得你可以参考然后结合自己的思考去做，部门发展规划可以考虑长远和短期，最重要的一点是可以操作和执行。

我觉得做这个规划可以从两方面着手，就看你们公司适应哪个方面。

1.公司让测试部做多少事，做哪些事，目前测试部门当前资源能做多少事，做好多少事。

很多时候，我们要获取公司对测试部的定位和要求，那么我们根据这些要求我们结合目前情况，可以规划一下我们需要哪些资源才能把事情做好。、

比如公司今年公司研发有10个项目，有150的研发团队，那么我们测试部如果要达到交付缺陷5%以下，我们需要多少人，需具备怎样测试技能的人。那么我们就要跟领导或老板沟通，要让我办好这件事，需要公司给我多少人和枪，不然我只能保证60%的项目达到这个目标。

2.作为当前公司测试部门的掌门人，你想做多少事，做成几件事

作为测试部掌门人那么自己也有自己人生规划，那么目前这个公司在我们人生规划是起怎么样的一个地位，我们需要哪些人生尝试，前提是做好本职工作时候。比如新测试技术探索，人员帮带和培养。

比如目前我们这个公司，希望我的测试团队能够达到30多人，目前已达到21人，我希望我的测试团队今年要建立一个性能和自动化的测试团队，目前性能团队已基本建立，自动化尝试了一下发现，现在还不是时机。下半年我们希望开展白盒测试，让测试更深入，缺陷更早预防，那么我邀请开发人员给我们讲开发的相关知识，到开发中寻找适合的人才。还想把我们原先人工考核方法，做一个绩效考核平台，那么我找了一个测试人员兼职开发这个项目。

总结一下，做好部门规划这事没有现成，只能自己深入了解自己的角色，知道我需要知道什么，能做多少事才行。而且在实践中不断进行调整，找到一个适合这个公司，这个部门和自己的一条路。

薄雾晨阳

一个测试管理新手，如何开展测试部门的管理工作？需要制定哪些测试制度规范？是否需要把那些制度文档化在测试部门加以流转？