[你问我来答第14期]：CMMI评估探讨（已结束）

默默巫

本期客座专家

论坛ID：liaoxj
真实姓名：李定军
擅长技术领域：测试管理，性能测试，功能测试，CMMI过程改进
现任公司：杭州创业软件股份有限公司
现任职位：质量管理部副总经理
工作经验：10年
项目经验：医疗产品（HIS，EMR，LIS，PACS，公共卫生）的功能测试，性能测试

各位会员可以在8月26日前以回帖的方式向客座专家提问。
（请大家围绕本期客座专家的擅长领域进行提问、探讨）
客座专家将在8月27日—9月12日为大家集中解答。
机会难得，欢迎大家踊跃提问！

a544529651

我来旁听的

liaoxj

弱弱了看多年前的内容，有点脸热。

河北测试MM

大傻，你写的真好，支持

niunjxtest

。。

liaoxj

回复95#
问题：
    请问刚入测试这一行的我，最基本的应该从哪里开始呢。
大傻回复：
    计算机基础：网络，操作系统
    产品业务：测试产品的功能，业务流程，业务标准，行业标准。
   常用工具：office，数据库工具， 缺陷管理工具，配置管理工具，开发工具

liaoxj

回复91#
问题:
     请问性能测试由于业务场景过多，应该如何把握尽可能多的覆盖场景，因为当前应用场景还不是很清楚用户场景，在这种情况下，应该如何去设定测试范围呢？
大傻回复：
    性能测试不是用户场景越多越好，性能测试的目的，就是完成性能测试需求，前面要通过很多性能需求分析，通过性能需求分确定最小业务场景。应用场景不清楚用户场景那就要去搞清楚了。有时也可以通过本身应用业务去预测。   一般性能瓶颈者出现在用户访问量较多的业务和某几个业务有关联的时候，比如有人在做挂号收费，又有人在做挂号收费方面统计或结账等。

liaoxj

回复89#
问题：
    想请教一下LR的压力测试流程。最好是图解。
大傻回复：
    负载测试一般包括 5 个阶段：规划、创建脚本、定义场景、执行场景和分析结果。
➤ 规划负载测试。定义性能测试要求，例如并发用户数量、典型业务流程和要求的响应时间。
➤ 创建 Vuser 脚本。在自动化脚本中录制最终用户活动。
➤ 定义场景。使用 LoadRunner Controller 设置负载测试环境。
➤ 运行场景。使用 LoadRunner Controller 驱动、管理并监控负载测试。
➤ 分析结果。使用 LoadRunner Analysis 创建图和报告并评估性能。
图解：兄弟买本书吧

默默巫

多谢大傻

liaoxj

    我要做专家【你问我来答第14期]：CMMI评估探讨】今天结束了，我很高兴在这30天时间能够大家畅所欲言，我自己也成长了不少，很多问题我也查了很多资料，巩固了一下。在这里我非常感谢51testing给我这么一个平台让我能跟大家一起交流。
    本期也有很多遗憾就是由于个人知识面，文字表达能力欠缺和时间限制，无法跟大家更深入交流，希望经后机会跟大家面对面的交流。今天是中秋佳节，祝大家中秋快乐，阖家团圆！也希望大家经后多跟我交流。8月26号以后的问题不能及时回答，望见谅。

                                                                                                                                              大傻
                                                                                                                                     2011-9-12  22:59

liaoxj

回复83#
问题1：
   如何去做好自己负责的测试项目的费用预算和评估？
大傻回复：
   我们测试预算评佑有专门的评估方法，以前是跟开发一起，现在我们是独立核算，我们是根据项目规模和项目特性来计算测试预算费用的。先有方法，以后慢慢调整。
问题2：
   何权衡测试缺陷与测试质量的关系，怎样去把握这个度让开发人员和测试人员都满意？
大傻回复：

    权衡测试缺陷和测试质量肯定要根据项目目标和用户体验了，如果这个项目只是一个演示版那么测试标准就一样了。测试人员和开发人员如果目标一致就不会有矛盾了，当然如果你的机制也要好，如果开发人员的考核直接跟测试人员的缺陷挂钩，不打架才怪呢。

问题3：
   对一个系统的安全测试，大家有何好的建议，可以从哪些方面入手去测试？
大傻回复：

    安全性测试(security testing)是有关验证应用程序的安全服务和识别潜在安全性缺陷的过程。安全性测试并不最终证明应用程序是安全的，而是用于验证所设立策略的有效性，这些对策是基于威胁分析阶段所做的假设而选择的。

   软件安全性测试包括程序、网络、数据库安全性测试。根据系统安全指标不同测试策略也不同。

1.用户程序安全的测试要考虑问题包括：

a)明确区分系统中不同用户权限;

b)系统中会不会出现用户冲突;

c)系统会不会因用户的权限的改变造成混乱;

d)用户登陆密码是否是可见、可复制;

e)是否可以通过绝对途径登陆系统(拷贝用户登陆后的链接直接进入系统);

f)用户推出系统后是否删除了所有鉴权标记，是否可以使用后退键而不通过输入口令进入系统。

2.系统网络安全的测试要考虑问题包括：

a)测试采取的防护措施是否正确装配好，有关系统的补丁是否打上;

b)模拟非授权攻击，看防护系统是否坚固;

c)采用成熟的网络漏洞检查工具检查系统相关漏洞;

d)采用各种木马检查工具检查系统木马情况;

e)采用各种防外挂工具检查系统各组程序的客外挂漏洞。

3.数据库安全考虑问题：

a)系统数据是否机密(比如对银行系统，这一点就特别重要，一般的网站就没有太高要求);

b)系统数据的完整性;

c)系统数据可管理性;

d)系统数据的独立性;

e)系统数据可备份和恢复能力(数据备份是否完整，可否恢复，恢复是否可以完整)。

liaoxj

回复82#
问题:
    老师：由于我们公司的测试正式规范起来还不到半年，许多制度还不是很完善，我想问下，我们测试什么时候介入项目比较好，为什么？我们公司是没有需求这一步的，现在的测试就是我们去问程序员需求，产生一份测试需求，但是这样很被动，最终会漏掉一些东西，但是由于测试在公司地位不是很高，直接参与到需求评审又不太可能。
大傻回复：
    测试肯定越早介入项目最好，这已经是测试的共识了，我们目前我是项目启动的时候就介入了，测试人员一般是需求开始的时候才真正的介入。
    需求评审测试人员一定要参加旁听也行，为什么不可能参加，作为部门领导该争取的时候一定要争取，可以要求项目经理让你参加评审会，有时脸皮要厚一些，他们在开评审会的时候，就是直接去参加，难道他还赶你不成。当然我们参加评审会时，功课一定要做好。到一定阶段时候你不想参加，他可能要指名道姓一定要你参加了。

liaoxj

回复79#
问题1：
   公司领导要我给小组成员制定部门人员的培养计划，如何制定呢？能否借鉴您的经验给个方向呀。
大傻回复： 这个问题，我们前面已经回复了其实就是公司意愿和个人意愿如何有机结合。
问题2：
   如何去设计测试工作的checklist，使得常规化的工作有据可依？
大傻回复：
   测试工作checklist其实只要把握测试工作几关键点就是，测试开始之前，各测试阶段开始之前，测试完成之前和测试工作产品提交评审或审核之前。
问题3：
   怎样去设计公司的测试技术标准和测试制度，让测试技术标准和测试制度来管人？具体的测试技术标准和测试制度涵盖哪些内容呀？
大傻回复：

    好的企业文化会让优秀的员工越来越优秀，好的制度会让普通的员工变成优秀的员工。所以我要建立一套适何自己公司的标准和制度，技术标准和制度不难制定，难得是坚持执行，所以我必须建立一套监督机制。测试制度和技术标准从大的方面可以以下几项。

1、工作流程，如测试准入，测试退出准则等。

2、工作人员，性能测试人员技能要求等。

3、工作产品，测试用例评审标准等

4、工作环境，测试工具和日常工具版本标准等。

5、后勤保障，人员工资，奖金标准等。

liaoxj

回复77#
问题1：
如何去建立通用的测试用例规范库？方便后续测试设计用例时，直接复用即可，用什么软件管理最佳？
大傻回复：

建立通用的用例库，我们这里也努力，不过可以把我们操作思路拿出来给大家一起交流。

1.将一些行业，开发规范，界面规范纳入通用测试用例库。

2.建立公司产品业务的基础用例库，如我们HIS，电子病历，社区等。

3.建立一些自己总结和其它路径获取的用例，如边界值，登录，查询等。

工具没有最好，只有适何不适合自己，可以是免费开源，或者是收费的，甚至是word,excel，重要的管理方法和机制。

问题2：
   如何根据每个人的特长，帮助组内的下属去制订每个人的职业发展规划？
大傻回复：

下属的职业规划分两种，一种是他本身的意愿，比如是管理方向还是技术方向，另一种是公司为我们下属提供几种可以选择岗位和方向。而作为我们这些负责人要做得是如何在完成部门总体目标的同时，又能满足个人发展合理需求。

问题3：
  如何去建立一系列的业务系统自动化测试框架快速实施自动化测试？
大傻回复：

自动化是好东西，但是目前还不成熟，我们可以选择一些简单业务去尝试做自动化，只能通过实践去积累了。

问题4：
   如何做好部门的测试技术平台建设？可以从哪些方面去深入思考和探讨？
大傻回复：

我想象中的测试技术平台，就是我们测试工作的日常工作，测试过程，工作产品都是在这个平台中进行。可以在平台中收集我们需要的产品本身，测试人员，开发人员的各种数据，并提供合理度量模型。分析出产品质量情况和人员绩效情况。

问题5：
   如何做好年底的测试部门工作总结？从哪些方面去总结，才更能体现测试部门的特色和工作业绩？
大傻回复：

作为我们这些管理都者工作总结就实实在一些，今年做了拿些事，年初目标完成情况，年初定的计划完成了多少，没有完成的原因是什么，明年打算怎么做，哪方面要提高。当然这些内容如果能配些数据分析图和具估实例那会更直观和客观一些。什么业绩就是公司给你的目标和任务有没有完成，完成情况如何。

liaoxj

回复76#
问题：
咨询2个测试组目前碰到的问题吧！
（1）刚组建18个月的测试组，该如何去进行测试团队建设？可以从哪些方面去开展？面试测试的时候也经常被问到，希望知道的朋友多出出主意和给个方向，呵呵。
（2）如何去建立和完善合理的激励机制，激发员工的潜能，一直保证员工工作积极性，让测试工作开展得有声有色？避免测试人员混日子的情况。
大傻回复：
   这个两个问题前面有类似问题我已回复，我补充一些内容吧，大家建立激励的机制，别忘建立淘汰机制，有时如果没有淘汰机制，激励机制会变成和谐的东东。

liaoxj

回复74#
问题：

毕业后做测试组长也快2年了，一直为测试组内的沟通发愁，一直都在摸索一个问题：怎样去制定和履行部门内管理和跨部门沟通规范？如何去实施和执行？希望能得到前辈的指点和教导，thanks！！

大傻回复：

在工作中，您需要与您的上级、下级、相关部门、尤其是您的客户进行各种不同层次的沟通，如果您发现自己与人交流沟通不当，想一想是否因为自己没能重视沟通？有了良好的沟通，办起事来就畅行无阻。沟通涉及到获取信息或提供信息，在这种或那种之间，或对他人施以影响以理解您的旨意并愿意根据您的愿望行事。

我个人认为，内部沟通，首先作为你这个领导要主动去跟员工去沟通，有时候可以去聆听，沟通是双互的，你不要老想别人来跟你沟通。有时候就像谈恋爱前面就剩下一个窗户纸了，但是没有人主动捅破它。沟通方式可以多样会议，面谈，甚至是QQ或邮件也是沟通。

跨部门的沟通必须建立一个机制，这种机制是建立在共同目标上的，当然部门领导之间也会建立一些私人关系，有时这种私人关系也带来一些工作上的便利。

liaoxj

回复73#
问题：
   今天测试经理下班时叫我好好想想，以后协助他编写和完善质量管理体系?可我一直做测试，对质量体系都没概念，怎样去做这个体系呢？可以从哪些方面去设计呀？如何去规划这个体系呢，犯难呀，只能求助专家了。
大傻回复：

质量管理体系是企业内部建立的、为保证产品质量或质量目标所必需的、系统的质量活动。它根据企业特点选用若干体系要素加以组合，加强从设计研制、生产、检验、销售、使用全过程的质量管理活动，并予制度化、标准化，成为企业内部质量工作的要求和活动程序。我觉得你可以产品行业标准，工程流程标准，测试检验标准等方面设计。

建立、完善质量体系一般要经历质量体系的策划与设计，质量体系文件的编制、质量体系的试运行，质量体系审核和评审四个阶段，每个阶段又可分为若干具体步骤。

教育培训，统一认识：质量体系建立和完善的过程，是始于教育，终于教育的过程，也是提高认识和统一认识的过程，教育培训要分层次，循序渐进地进行。

组织落实，拟定计划：尽管质量体系建设涉及到一个组织的所有部门和全体职工，但对多数单位来说，成立一个精干的工作班子可能是需要的，根据一些单位的做法，这个班子也可分三个层次。

确定质量方针，制定质量目标：质量方针体现了一个组织对质量的追求，对顾客的承诺，是职工质量行为的准则和质量工作的方向。制定质量方针的要求是：

1.与总方针相协调；

2.应包含质量目标；

3.结合组织的特点；

4.确保各级人员都能理解和坚持执行。

现状调查和分析：现状调查和分析的目的是为了合理地选择体系要素。

调整组织结构，配备资源：因为在一个组织中除质量管理外，还有其他各种管理。组织机构设置由于历史沿革多数并不是按质量形成客观规律来设置相应的职能部门的，所以在完成落实质量体系要素并展开成对应的质量活动以后，必须将活动中相应的工作职责和权限分配到各职能部门。一方面是客观展开的质量活动，一方面是人为的现有的职能部门，两者之间的关系处理，一般地讲，一个质量职能部门可以负责或参与多个质量活动，但不要让一项质量活动由多个职能部门来负责。目前我国企业现有职能部门对质量管理活动所承担的职责、所起的作用普遍不够理想总的来说应该加强。在活动展开的过程中，必须涉及相应的硬件、软件和人员配备，根据需要应进行适当的调配和充实。

质量体系文件编写：除质量手册需统一组织制订外，其它体系文件应按分工由归口职能部门分别制订，先提出草案，再组织审核，这样做有利于今后文件的执行

质量体系试运行：文件编制完成后，质量体系将进入试运行阶段。其目的，是通过试运行，考验质量体系文件的有效性和协调性，并对暴露出的问题，采取改进措施和纠正措施，以达到进一步完善质量体系文件的目的。

质量体系的审核与评审：质量体系审核在体系建立的初始阶段往往更加重要。在这一阶段，质量体系审核的重点，主要是验证和确认体系文件的适用性和有效性。

liaoxj

回复71#
问题：
       请教一下李老师：一般7、8个人的测试小组，如何去设计小组的工作岗位和组织架构比较合理？如何去做部门不同岗位的岗位职责？一直处于疑惑中呀！
大傻回复：
    我个人认为如果团队规模较小的时候，不要把工种分得很细，很多时候不是很实际的，小团队的时候一定要把所有人利用起来，而利用起来的时候就需要人要多才。
    我建议7、8个人人小团队，建议已公司产品业务分组，如果测试组有性能测试，建议测试小组的成员兼职。每到一段时间的时候，在恰当的时机进行人员轮换，以便不时之需。
    部门岗位职责这肯定要根据公司给你任务分解职责了，像你这样可以分为小组长，骨干，普通成员的职责了。

liaoxj

回复70#
问题：
问下大侠，若是有一个网上售票系统让大侠做一下性能测试，请问大侠会从哪些方面入手，如何入手，性能测试点什么，谢谢大侠
大傻回复：
     说句实话，这样的问题我很难回答，你的性能是开发过程想知道系统大概性能情况，还是想知道需要咱样硬件或网络配置才能支持当前的生产环境，还是现在已经有性能问题，想寻找性能瓶颈。怎么入手请看一下本贴24#性能测试流程吧。