【你来问我来答第60期】：如何搭建一个高产出的测试团队（已结束）

lsekfe

个人简介：

• 诸葛东明：搜狗公司搜狗浏览器测试经理。
• 2006年毕业于兰州理工大学，2008年加入搜狗公司，经历了搜狗浏览器从无到有的过程。
• 期间先后从事过Windows客户端的手工测试、自动化测试、单元测试及项目管理工作，所涉及的技术主要偏向于C++、QTP、python、Gtest等在搜狗浏览器的稳定性自动化测试、底层库单元测试、敏捷项目管理方面有多年的经验。
  

各位会员可以在7月1日前以回帖的方式向客座专家提问。
（请大家围绕本期客座专家的擅长领域进行提问、探讨）
客座专家将在7月11日—7月31日为大家集中解答。
机会难得，欢迎大家踊跃提问！

诸葛东明

tanshunsky 发表于 2015-7-9 10:33
您好，请问如何用Loadrunner监控linux服务器的资源利用率

一般有三种方法：
1.使用top命令查看服务器的整体资源消耗。
2.使用top、awk、grep和sed命令组合，对指定资源进行监控。   例如：我们要对nginx的资源进行监控，通过top+grep出来nginx的资源，然后将第6列的内存占用print出来，同时用sed去掉m之后awk加和。同时这个命令还可以在尾部增加>>file的方式，将日志输出到一份文件中，然后使用excel进行绘图。
top -n 1 -b | grep nginx |awk '{print $6}' | sed 's/m//g' | awk 'BEGIN{total=0}{total+=$1}END{print total}'

3.使用linux下nmon工具进行资源监测。具体方法，我转载组内一位同学的总结：

Linux版本的nmon下载地址：http://nmon.sourceforge.net/pmwiki.php?n=Site.Download，最新版本的nmon及nmon Analyser都可在此网站上下载到。

监控方法：

根据被监控操作系统的版本信息，下载相对应的nmon工具。例如nmon_x86_rhel5是适用于Red Hat Enterprise 5 32位的操作系统，nmon_x86_x64是适应于x64位的操作系统。查看操作系统的位数可以使用uname -a来看。

将nmon上传到想要存放的位置，并使用chmod 777 nmon_x86_rhel5命令授予执行权限，使用./nmon_x86_rhel5执行出现如下界面：

根据提示可查询相关资源的情况，比如输入c可显示CPU情况，m可显示内存情况：

对于监控结果，可使用nmon命令输出到文本中，命令格式为：./nmon_x86_rhel5 -f -s<收集间隔> -c<收集次数>

f代表生成监控数据

s代表设置收集间隔

c代表设置收集次数

例如：./nmon_x86_rhel5 –f –s1 –c600表示每隔1秒收集一次，共收集600(10分钟)次监控数据

生成的结果数据文件名称格式为：主机名_当前日期_当前时间.nmon

数据收集完成后，用nmon Analyser（nmon性能测试工具）分析监控结果文件即可。

注：目前只支持office2010及以下版本的office绘制表格。

海里的幸福

支持~~

a939916104

我要做专家 ！！！  新手上路 各位哥哥姐姐 多多指教

guikeyy

自动化测试及性能测试从团队角度如何制定绩效指标？

诸葛东明

wangzhanxiang 发表于 2015-8-6 10:02
你好，我们近期要进行产品发布后对测试情况的一个bug分析，请问如何开展，要进行哪些分析，bug产出比较多， ...

BUG分析的目的是什么？
如果是体现质量环节的问题，并加以改进的话，可以从这几个方面尝试进行，例如：
1.BUG的趋势：
   1)BUG增长是平稳增长的，还是在某个时间点集中增长的。(如果是集中在某个时间点爆发式增长，是不是说明提测质量存在问题，是不是引入开发自测环节)
   2)在回归阶段，BUG的趋势是下降的，还是连带有更多的BUG导致趋势下降不明显。(如果开发连带BUG比较多，是不是考虑改进对于连带BUG的改进方案，例如代码内部评审等机制)
2.BUG的类型：
   1)BUG的类型都是怎样的：兼容性问题BUG、崩溃BUG、与需求不符的BUG....等等。(BUG多集中在哪些方面，如果是需求方面是不是代表开发对需求理解不足存在问题；如果是崩溃BUG集中，是不是开发在异常处理及容错方面存在问题；如果是兼容性问题居多，那么测试下一迭代是不是应该在兼容性方面准备更加充足的方案。)
   2)BUG的重现率是怎样的，BUG是都稳定重现居多，还是有几率重现居多。(如果有几率重现BUG居多，是否在程序中引入更为详细的LOG日志，方便测试和开发对BUG追踪)
3.BUG所属的开发人员和测试人员：
   1)BUG所属的开发人员是比较集中，还是分撒在不同人上面的。(如果集中在个别开发上面，是因为开发人员的代码能力问题，还是因为开发人员的工作量比较集中在个别人上面，是否可以做改进)
   2)BUG发现的测试人员同样的也可以分析数量，进而分析是测试人员的工作量分配原因，还是模块的复杂度原因，还是个人能力的区别。

....等等还有很多

总之一句话，通过BUG的各项数据分析，发现其中的问题，进而思考问题的改进方案。

wangzhanxiang

诸葛东明 发表于 2015-7-30 13:07
你好，之前有同学已经问过类似问题，请参考33楼回复

谢谢老师，我看看。

wangzhanxiang

你好，我们近期要进行产品发布后对测试情况的一个bug分析，请问如何开展，要进行哪些分析，bug产出比较多，感觉无从下手。

诸葛东明

shujin6040 发表于 2015-7-31 12:05
QTP遇到获取XML时不兼容特殊字符,比如XML里面有特殊字符，获取则会失败怎么解决。提示十六进制问题

贴一下具体的错误代码吧，另外XML文件的特殊字符应该会有CDATA包起来的，按理不会出现问题。

shujin6040

QTP遇到获取XML时不兼容特殊字符,比如XML里面有特殊字符，获取则会失败怎么解决。提示十六进制问题

诸葛东明

wangzhanxiang 发表于 2015-7-30 11:09
老师，您好，我们一名测试部门负责人，请问，如何有效的对测试人员进行绩效考核，从而提供员工的积极性以及 ...

你好，之前有同学已经问过类似问题，请参考33楼回复

wangzhanxiang

老师，您好，我们一名测试部门负责人，请问，如何有效的对测试人员进行绩效考核，从而提供员工的积极性以及工作效率，谢谢！

dx0727

好的谢谢老师，主要是薪资到达了瓶颈，还需要提升只有学习自动化或者语言代码了

诸葛东明

dx0727 发表于 2015-7-28 14:16
老师我想问下，我去年毕业从事app手机测试一年，主要是一些黑盒的功能测试，现在转app适配测试但是不会自动 ...

只是工作一年，还谈不上什么瓶颈，两个建议：
1.做好现在手头的测试工作，并且从中不断积累总结，例如手机测试要掌握的测试体系都有哪些，手机测试要使用到的测试工具都有哪些....所以这些内容都可以把它积累总结起来。
2.如果对自动化有兴趣，那么就去学习相关的代码和技术，然后在工作中不断进行实践和总结。

dx0727

老师我想问下，我去年毕业从事app手机测试一年，主要是一些黑盒的功能测试，现在转app适配测试但是不会自动化，需要如何提升自己，代码不懂，日后希望做测试，是否只可以走自动化这条路才可以继续上升自己，目前情况感觉已经到了瓶颈

诸葛东明

苏二09 发表于 2015-7-27 17:16
诸葛老师。我是做游戏的，。。  这是我第一份工作，我很好奇，手游是用什么工具测试的？为什么手游的测试工 ...

很抱歉，手游方面没有相关的项目经验，帮不上你什么忙，建议论坛里的大牛们回答下吧。

诸葛东明

shanfeng1419 发表于 2015-7-27 14:30
基于web自动化测试和基于GUI测试，他俩各侧重什么，区别是什么。谢谢

hi,shanfeng
感谢你的提问，我分别从测试内容、项目经验、疑难问题谈谈自己的拙见吧。
一、基于Web自动化：
      基于Web自动化测试的内容比较广，它包括前台页面的自动化测试、后台接口的自动化以及后台功能逻辑内部的单测自动化。
      举例来说：
      1.前台页面的自动化：如搜狗浏览器的"我的最爱"页面，我们可以在页面中添加一个九宫格内容，添加的url、title是输入数据，预期要检查的是添加后九宫格的标题、截图等。在这个过程中核心思想是自动化操作页面WEB元素，自动化的对WEB页面元素进行预期结果校验。
      2.后台接口的自动化：如搜狗预约抢票功能(是一个Web服务)，我们在测试时了解到后台有几个核心的功能，如查询订票信息QueryTicket.php，接口参数有日期、起始站、到达站等等参数，那么可以通过Python等脚本构建http请求发往接口，同时检查返回的结构与预期一致。这个过程核心思想是测试没有前台页面的操作，均通过后台的请求来进行接口校验
      3.后台功能逻辑自动化：相比后台接口自动化，这一环节的测试会更加深入一些，会对内部功能实现的逻辑进行数据构造和测试。例如搜狗预约抢票功能，在下单逻辑中，有一段非常复杂的判断逻辑：是坐席优先还是车次优先，如果是车次优先对于硬座、硬卧、软卧如何选择等等，这个过程中需要在WEB端的逻辑编写单测进行测试，如Junit。这个过程核心思想是对代码内部逻辑通过脚本或者单测框架进行自动化测试。
二、基于GUI测试
      GUI测试，我认为是WEB自动化测试的一个子集，相当于上述web自动化测试中的前台页面自动化。对于window客户端来说，只是测试对象由WEB变为windows客户端，核心思想仍然是通过windows的控件元素间接的验证功能逻辑，例如搜狗浏览器安装卸载自动化测试时，我们可以通过图片像素对比，对安装界面中的beta字段、版本号甚至安装动画中的关键需求点进行自动化验证。
      GUI自动化测试中的疑难问题是：测试不稳定，例如UI界面晚出来2秒，可能case就Fail了，所以搜狗浏览器的自动化逐步转向接口和内部的单测，对于外围自动化的比例逐步降低。

以上是一些过去经验和看法，希望能对你有所帮助。

苏二09

诸葛老师。我是做游戏的，。。  这是我第一份工作，我很好奇，手游是用什么工具测试的？为什么手游的测试工具这么少，而且感觉比LR还要难。

诸葛东明

zhangzhimei1004 发表于 2015-7-27 15:51
非常感谢，作为个人来说，我更喜欢项目管理和团队管理。有什么比较好的书籍推荐 一下？

项目管理相关的书籍看得不多(惭愧....)，暂时没有好的书籍推荐。

团队管理的书推荐先看看这本，<<领导力--如何在组织中成就卓越>>。本次客座专家提到的以身作则、共启愿景、挑战现状、使众人行、激励人心均出自此书。

论坛有2M上传限制，大家可以通过以下链接下载http://share.weiyun.com/086e77d162df579cc1da8fc34d76669f

zhangzhimei1004

诸葛东明 发表于 2015-7-22 21:08
三个人的测试团队确实不算大团队，但是麻雀虽小五脏俱全，在小团队仍然不妨碍自己向如下方向发展：
1.项 ...

非常感谢，作为个人来说，我更喜欢项目管理和团队管理。有什么比较好的书籍推荐 一下？