最新要闻
- 无锡阳山桃花源景区可以摘桃子吗_天天速看料
- 环球焦点!因不富裕 《王国之泪》粉丝攒钱6年才买到Switch
- 杀疯了!理想汽车公布2023年第一季度财报:营收、交付等多项数据历史最好
- 男子暴雨天救助流浪猫 专家确认:国家二级保护动物
- 四月厂商销量榜:国产车强势爆发 前五占三席
- 散片便宜300元!但还是劝你买盒装CPU|世界动态
- 热资讯!华能水电:拟收购华能四川能源开发公司100%股权
- 观察:理想汽车:预计第二季度车辆交付量7.6万至8.1万辆
- 滚动:1999元起 真我11 Pro+发布:同价位中的2亿像素王
- 热点!432核心 25个人开发!欧洲自研CPU飞入太空
- 淘宝天猫历史最大投入618:今年推出直降专场 不用费劲凑单领券 焦点速递
- 环球观察:爸爸因无人回应退家族群 女儿发声:反而变热闹了
- 天玑9000性能满载!vivo Pad2评测:操控如PC般行云流水_今日聚焦
- 环球热消息:4月销量仅6658台!不降价的蔚来,终于把自己玩懵了?
- 甘肃凉州:让非遗民俗文化“活起来”|观焦点
- 年度最火的KEEP动感单车免费得:连续88天打卡全额返 焦点速看
手机
iphone11大小尺寸是多少?苹果iPhone11和iPhone13的区别是什么?
警方通报辅警执法直播中被撞飞:犯罪嫌疑人已投案
- iphone11大小尺寸是多少?苹果iPhone11和iPhone13的区别是什么?
- 警方通报辅警执法直播中被撞飞:犯罪嫌疑人已投案
- 男子被关545天申国赔:获赔18万多 驳回精神抚慰金
- 3天内26名本土感染者,辽宁确诊人数已超安徽
- 广西柳州一男子因纠纷杀害三人后自首
- 洱海坠机4名机组人员被批准为烈士 数千干部群众悼念
家电
如何衡量软件测试的绩效 环球速讯
绩效的主要目标是保证产品或QA过程的一致性。它也可以是一个管理系统,允许管理者根据收集到的数据做出决定。过程的绩效衡量标准的实施应该涉及到整个组织。不同团队的衡量标准可能会有所不同。
什么是绩效衡量?
绩效衡量是管理和了解以下方面:
(相关资料图)
- 项目进展如何?
- 项目中的偏差及其原因?
- 资源的利用情况如何?
- 是否实现了既定的目标以及流程?
- 已实施的流程是否产生了预期的结果?
- 如何管理客户需求的?
- 有哪些需要改进的地方?
衡量的好处是什么?
- 追踪项目进度
- 满足客户的期望
- 了解存在的问题
- 分析需要改进的地方
- 确定改进是否生效
不同的指标
- 计划与实现的故事
- 自动化比例
- 生产性任务与非生产性任务
- 迭代周期内报告的缺陷百分比
- 构建中的缺陷
- 缺陷优先级
- 缺陷排查表
- 不修复的BUG比例
- 不修复BUG分析
- 生产缺陷
- 团队人员使用情况
- 自动化用例实现速度
- 个人自动化实现速度
- 工程师任务分布
- 自动化覆盖率
- 自动化进度
- 自动化问题趋势
- 自动化成本分析
- 测试用例自动化比例
- 自动化后节省的工作
参考资料
本文涉及的python测试开发库 谢谢点赞! https://github.com/china-testing/python_cn_resouce
python精品书籍下载 https://github.com/china-testing/python_cn_resouce/blob/main/python_good_books.md
测试精品书籍 https://github.com/china-testing/python-testing-examples
故事数
理想情况下,团队能够完成目标。已实现的故事数等于计划中的故事数。如果实现的故事数比计划的多,说明有是当前迭代中新增的故事。如果团队实现的目标少于计划,这可能意味着可能碰到困难。
有助于管理层:
- 根据可用资源的数量调整sprint的范围,并重新分配资源
- 根据以往的趋势规划即将发布的版本
自动化比例
理想:理想的情况应该与项目人员计划相一致。如果有3名自动化工程师和7名功能工程师,理想的情况是,工作分配应该是......。30%为自动化,70%为人工。
如果30%的精力花在了自动化上,但我们的自动化比例并没有达到30%。可能存在如下问题:
- 项目变化过于频繁
- 自动化工程师没有100%投入
- 自动化缺乏规划
这张图将帮助管理层:
- 为自动化分配适量的资源。
- 解决瓶颈问题,提高生产力
生产性任务与非生产性任务
非生产性任务包括以下活动,如团队建设活动,软技能培训、员工参与活动、基础设施故障造成的时间损失、电源、测试环境故障和内部会议(比如与人力资源部门的会议)。
理想情况下,大部分时间应该花在生产性任务上,如测试用例执行、测试用例的自动化或缺陷报告。
如果花在生产性任务上的时间比例小于非生产性任务,可能意味着
- 团队规模过大
- 测试任务阻塞
团队在非生产性工作上花费了更多的时间。管理层可以:
- 削减目前的人员配置计划
- 投资于容错基础设施,如备份互联网服务提供商和测试环境以增加正常运行时间
迭代周期内报告的缺陷百分比
报告的缺陷百分比必须逐步下降。
如果缺陷报告的百分比突然增加。可能是:
- 出现阻塞性问题
- 产品质量不稳定
管理层可以评估:
- 使需求更加清晰
- 通过必要的产品培训,最大限度地缩小知识差距。
构建中的缺陷数
理想情况下,缺陷数应减少
如果缺陷数在构建过程中上升,如可能意味着。
- 新的功能被添加
- 新功能有bug
- 新功能/模块出现阻塞
- 缺陷数量激增
该图提供了构建的质量信息,并根据这些信息,可以决定提前或推迟产品发布时间。
构建的缺陷优先级
理想的情况是:P1和总体缺陷数应该减少。
缺陷分解图
理想情况下,缺陷修复率应该与缺陷发现率相同。
如果缺陷修复率小于缺陷发现率,这可能意味着。
- 开发团队需要提高他们的代码质量。
- 原定的发布时间可能会有延迟,因应用程序bug多或由于资源匮乏开发团队不能及时修复QA报告的问题。
决策。这张图可以帮助管理层决定,是否缺陷积压正在增加。然后,他们可以跟踪发布时间表的状态。
不修复的BUG比例
理想情况下,不会修复的缺陷数量应该在可接受的范围内。有些团队将基准定义为小于5%。
更少的比例可能意味着。
- QA团队按照要求进行测试,并只报告有效的缺陷。
- 开发团队很高效
如果不会修复的缺陷率很高,可能意味着:
- 团队对应用或产品功能的理解程度较低。
- 需求不明确
这张图可以用来确定该团队是否是了解需求。如果不了解,管理层可以规划。
- QA团队的知识分享会
- 审查和修复QA团队的缺陷报告过程,因为他们可能会在他们的缺陷报告中没有提供足够的细节。
不修复BUG分析
理想情况下无不修复或无效的缺陷数。
如果不会修复或无效缺陷率很高,可能意味着:
- 要么是团队对需求不清楚或变化频繁。
- 缺乏适当的基础设施
这一分析将帮助管理层:
- 弥补需求的不足
- 隔离和解决特定环境问题
- 找出并解决QA团队的知识漏洞
- 突出产品的局限性,作为其发布中的已知问题
生产缺陷
理想情况下,发布后的缺陷数量应该在可接受的范围内。一些团队将基准定义为少于1-2%的优先级3或优先级4缺陷。
发布后缺陷率很高,可能意味着:
- 团队对应用或产品功能的理解程度较低。
- 由于资源不足,团队无法满足客户要求。
这将有助于管理层。
- 实施纠正和预防措施,以减少发布后的问题。
- 增加对发布后问题发生地区的测试覆盖率
- 让业务分析员进行模块知识分享会。发现发布后缺陷的地方,并讨论其对业务的影响。
团队人员使用情况
理想情况下,团队应该把时间花在自动化与人工任务上,30%的时间应该花在自动化上。
如果团队在自动化上投入不足:
- 团队的自动化速度将受到影响
- 自动化工程师被拉到其他任务分配中或其他任务。
这将有助于管理层:
- 调整资源
- 去掉低优先级的功能
自动化用例实现速度
衡量QA团队能够成功自动化的测试案例数量。
理想情况下,速度应该始终保持在预期的速度范围之间。
如果。如果团队的表现没有达到预期的目标,管理部门将:需要进一步确定速度下降的原因。这将有助于管理部门估计工作的速度。
个人自动化实现速度
理想的情况是,工程师的速度应该保持在预期的最小测试用例数和最大测试用例数之间。
如果低于红线,这意味着:
- 工程师被某些问题耽误或阻挡,影响了速度
- 由于业务需要,工程师被抽调到一些其他的工作中,比如维护由于应用程序工作流程的变化而导致的脚本的变化。
- 工程师的表现没有达到其他团队成员的标准,原因是缺乏产品知识或自动化工具知识
- 工程师将无法达到目标。
- 滞后的工程师会给团队中的其他工程师带来过重的负担。
这将有助于管理层:
- 估算工作完成的速度和完成工作所需的时间。
- 分析项目中是否需要增加或减少资源。
- 奖励执行者,培养非执行者,让他们像执行者一样提供服务。
- 关注每个工程师的成长
工程师任务分布
理想情况下,在自动化的初始阶段工程师应该花更多的时间在Framework开发上。,然后在测试用例自动化中。只有在出现以下情况时,才应将时间花在suite的维护上。比如应用功能或工作流程的改变。
如果工程师花更多的时间在其他领域,例如,工程师3的大部分时间都花在了修复同行评审。这意味着工程师3写的代码效率不高。
根据这个图表,管理层可以:
- 根据每个工程师的表现为他们设定目标:
- 利用这些数据来激励工程师,以获得更好的业绩。
自动化覆盖率
这张图可以帮助管理层确定:
- 自动化产品的百分比
- 确定人工测试团队的规模
自动化进度
如果实际自动化的测试用例数量出现了偏差。可能是:
- 由于其他高度优先的问题,自动化任务被搁置了。
- 团队不能有效地规划各项工作
- 产品存在偏差
该图可以帮助管理层:
- 显示团队的进展情况与预期的时间表相比,以及重新调配资源,按时完成任务
- 为自动化团队制定战略和规划未来的发展方向。
自动化问题的趋势
评估问题的类型,如脚本问题、产品问题等。理想的情况是,随着项目的进展,总的失败次数应该逐渐减少。这
如果有增加:
- 脚本问题 - 脚本创建需要改进
- 产品问题--应用程序代码不稳定
- 假阳性问题--那么在批处理过程中可能会出现任何不可预见的问题。执行,如定时/等待问题,或环境预设条件问题。
图表可以帮助管理层:
- 信任自动化的结果,并做出发布产品的决定,如果脚本问题和误报率极低-提高自动化代码质量。
自动化成本分析
理想:理想的情况是,节省的人工劳动量应超过自动化程度。30-50%的增长,以实现积极的投资回报率。
如果未来6个月内节省的人工成本等于或小于的自动化成本,那么该产品或模块就不适合自动化。
测试用例自动化比例
随着时间的推移,测试用例的自动化数量逐渐增加,因为测试用例的自动化数量会随着时间的推移而增加。
如果没有增加这可能是因为:
- 自动化任务因其他高度优先问题而被搁置。
- 团队未能有效规划工作
- 产品存在偏差
这张图可以帮助管理层。
- 判断自动化是否以及如何最适合项目。
- 更好的为自动化团队制定战略和规划未来的路线图。
自动化后节省的工作
理想的情况是:人工逐步下降。
如果没有下降:
- 根据项目要求,自动化团队成员被转移到手工团队
- 自动功能被淘汰
- 是否有任何基础设施阻挡了自动化测试的运行?
利用这个图表,管理人员可以做出以下决策:
- 重组团队或为自动化分配适当的资源
- 升级测试执行所需的基础设施
关键词:
如何衡量软件测试的绩效 环球速讯
无锡阳山桃花源景区可以摘桃子吗_天天速看料
环球焦点!因不富裕 《王国之泪》粉丝攒钱6年才买到Switch
杀疯了!理想汽车公布2023年第一季度财报:营收、交付等多项数据历史最好
男子暴雨天救助流浪猫 专家确认:国家二级保护动物
四月厂商销量榜:国产车强势爆发 前五占三席
散片便宜300元!但还是劝你买盒装CPU|世界动态
热资讯!华能水电:拟收购华能四川能源开发公司100%股权
AI别来搅局,chatGPT的世界不懂低代码 焦点要闻
观察:理想汽车:预计第二季度车辆交付量7.6万至8.1万辆
滚动:1999元起 真我11 Pro+发布:同价位中的2亿像素王
热点!432核心 25个人开发!欧洲自研CPU飞入太空
淘宝天猫历史最大投入618:今年推出直降专场 不用费劲凑单领券 焦点速递
环球观察:爸爸因无人回应退家族群 女儿发声:反而变热闹了
天玑9000性能满载!vivo Pad2评测:操控如PC般行云流水_今日聚焦
环球热消息:4月销量仅6658台!不降价的蔚来,终于把自己玩懵了?
[系统性能优化实践]JVM进阶实战之监控工具(Prometheus) 焦点速递
STM32【HAL库】使用外部SRAM程序
世界新资讯:如何通过appuploader把ipa文件上传到App Store教程步骤
【高端访谈】碳交易市场将如何影响化工行业?——专访全国化工节能(减排)中心秘书长张华
甘肃凉州:让非遗民俗文化“活起来”|观焦点
年度最火的KEEP动感单车免费得:连续88天打卡全额返 焦点速看
实时:可灭电火、油火 北大青鸟车载灭火器620ml 12.92元
真我史上最大底 真我11 Pro+搭载行业最高2亿像素传感器:挑战最强 每日热门
环球快资讯丨特斯拉要疯?向所有用户开放超充 车主拍手友商跺脚
首发2099元!九号电动V30C发布:50km续航、车架终身质保 当前热点
微软修复 Win10 / Win11 上 BlackLotus UEFI 漏洞
【天天报资讯】java读取文件——以自动贩卖机为例
天天热门:最佳软件测试基础入门教程1简介
环球视点!自建CA和公共CA有什么不同?
基于华为云图引擎GES,使用Cypher子查询进行图探索
每日消息!Vue2组件间通讯
每日快讯!【新华500】新华500指数(989001)10日收跌0.65%
当前热讯:成功展商要点——2023第十二届北京国际汽车制造业博览会
环球即时:传音Tecno Camon 20系列发布:五边形镜组极具辨识度
当前资讯!《斗罗大陆双神战双神》首个场景秀公开:虚幻5打造 画面逼真
这就很尴尬 男子高速电话指导女友开车 结果自己撞了
世界看点:4699元起 九号智能电动车小Q发布:新国标、能跑95km
一图看懂联发科旗舰新U天玑9200+:CPU/GPU性能提升10%、功耗更低了
环球看点!男童喉咙长菜花样肿块确诊感染HPV
今日看点:89.关于类的定义抽象数据类型
全球观速讯丨Mac系统,Qt工程转xcode工程,打包pkg
大幅提升前端工作效率!Numeral.js数值格式化库来了!
无需代码绘制人工神经网络ANN模型结构图的方法
2023年梅花金银兔纪念币价格(2023年05月10日)_世界快资讯
仅7999元!Redmi MAX 90英寸巨屏电视开售:百级分区、144Hz高刷 即时焦点
每日热议!亏电百公里油耗3.9升 比亚迪驱逐舰07申报:凯美瑞、雅阁瑟瑟发抖
保时捷718上新款 157.8万元起!真心无法抗拒 全球简讯
环球快看点丨悦达起亚被曝管理岗轮休 一休就一年!官方回应
中国电信在科技创新中加速释放消费活力 每日聚焦
每日播报!利用Appuploader上架IPA步骤
环球热文:代码随想录算法训练营第一天| 704. 二分查找、27. 移除元素。第一章 数组part01
黄道十二宫是什么意思?黄道十二宫是哪个文明首先提出的?
每日看点!98年浙大女学霸曾被视为格力接班人 孟羽童称靠别人永远不如靠自己
金锣玉米热狗香肠20袋到手19.9元:新鲜美味 当前短讯
热讯:为什么这届年轻人基本不走亲戚了?互联网“断亲”情况加剧:专家释疑
【环球新视野】西渝高铁最新进展!200余户已签协议
双商最高的四大星座是什么?十二星座的月份表
神话Eric的妻子是谁?神话Eric个人介绍
2011年快乐女声有哪些评委?2011届快女排名前十名
消失日晖打一字是什么?猜字谜游戏题目及答案
台电平板怎么刷机?台电平板android版如何获取root?
会声会影x4激活步骤是什么?会声会影x4激活代码
华硕f83v笔记本电池充电时橙色充电灯不停闪烁怎么解决?华硕f83v笔记本参数
三星笔记本r467怎么进bios设置u盘启动?三星笔记本r467参数
Vue 前端开发团队风格指南(史上最全)
Linux ARM架构_安装JDK8-银河麒麟V10 Kylin Linux-焦点速递
PSP上哪个火影的游戏最好玩?PSP经典游戏有哪些?
商家广告鼓励偷男友钱喝奶茶被罚 热消息
环球通讯!苹果推出iPad版Final Cut Pro与Logic pro:1个月免费试用
国人秒懂内涵 如何辨别在美国的中国人:看车牌 环球今头条
吸、扫、拖三合一!米家免洗扫拖机器人2正式开售:1999元
深圳一男子举牌相亲 月薪6千要求女方1万2:被路人质疑后神回应 世界热门
史诗级尴尬!马斯克驾驶Cybertruck结果趴窝:在农田里陷车
2023年社保缴费基数怎么调整?什么时候重新申报?_环球新资讯
环球新资讯:2分钟快速上手流水线的创建与运行
当前视讯!接单日记(三)文本处理之词云生成
今日热门!台式电脑有线网络怎么连接_有线网络怎么连接
华为将发布双旗舰笔记本 MateBook新品颜值、性能将迎全面升级
世界热点!任天堂Switch卖不动了?销量下降22% 还要再苟一年
首发9999元 小米电视ES Pro 90寸开售:1000nits高亮度
今日观点!希思黎京东官方自营旗舰店开业 打造全新高端奢护体验
环球今日报丨支持双枪快充!比亚迪赵长江:腾势N7制动距离“遥遥领先”
焦点热讯:首个“三体”线下项目《三体 · 引力之外》有啥不一样?
焦点热议:杭州:西湖景区莲花绽放 花朵水面摇曳身姿
全球即时看!科大智能参设新能源发展公司 经营范围含电池销售
今日快讯:3D建模师用AI把自己变美少女 大叔成偶像
理想老板怒斥媒体人:隔壁吉利的高管羡慕坏了
多家挖呀挖公司注册成立:涉及零售业、服务业-每日资讯
环球滚动:50万级老板专属座驾 新一代国产奔驰E级亮相:车身、轴距全加长
249元 小米智能摄像机3开售:3K超清画质 支持双向语音通话
听说你还回忆我小说 听说你还回忆我
高效c语言1快速入门|焦点热闻
使用IDEA远程Debug调试(详细)|今日快讯
Echarts引入——绘制一个简单的图表|环球信息
世界热点评!豫能控股拟30亿布局新能源转型待考 煤炭涨价助推成本上升两年累亏逾40亿
头条:国内“老头乐一哥”!雷丁汽车申请破产:曾被经销商举报为诈骗
七彩虹发布新款隐星游戏本:RTX 4060首发5999元
【世界聚看点】百万级越野车!仰望U8申报信息公布:搭比亚迪最强2.0T发动机
全球聚焦:蔚来车主 绑架李斌?