报告:世界顶级组织测试

软件测试的挑战非常低估和必然的赏识188金宝搏官网登录app。即使看似基本的应用,比如常见的移动app-there数量惊人的测试方法可以采取,路径和条件可以锻炼,可以测试设备配置,等等。与今天的不间断的发布周期,确保每次更新增加价值在不影响用户体验的已经是一个艰巨的任务。

困难的是加剧了企业组织。在这个层次上,测试必须适应:

• 复杂的应用程序栈,包括平均900应用程序。单一交易平均82不同的技术从大型机和遗留microservices和原生云应用程序自定义应用程序。

• 根深蒂固的手工测试过程是为瀑布和外包测试敏捷交付的韵律,DevOps,开车向“连续一切。”

• 要求极端的可靠性。IDC每一个小时的停机时间在企业环境成本从500美元到1美元。“快速移动和破坏东西”在许多行业不是一个选择。

尤其是企业级的,测试是延迟交货的# 1来源,手工测试仍然无处不在(只有15%是自动化)和测试成本消耗平均23 - 35%的整体消费。

然而,许多顶级组织找到一个方法来突破这些障碍。他们把测试变成他们的数字转换的催化剂initiatives-accelerating交付和创新也解锁预算。

他们做的事有什么不同?和您的组织如何比较?

引入第一年度企业应用程序测试基准

阐明行业领导者如何测试软件,他们的业务(和世界)依靠Tricentis上发布我们的研究结果是世188金宝搏官网登录app界顶级组织考试的第一年188金宝搏app苹果下载软件世界顶级组织如何测试报告。这些数据收集通过一对一的采访质量经理和高级领导人代表多个团队。参与者代表团队使用各种QA-focused功能测试自动化工具(开源、Tricentis和其他商业工具)。188金宝搏app苹果下载软件开发人员测试和安全测试活动的范围。

当前报告侧重于收集的数据来自100强组织我们采访:财富500强(或相当于全球)和主要政府机构在美洲、欧洲和亚太地区。所有以营利为目的的公司有5 b美元或更高的收入。

我们在这里保护每个人的隐私,但是想象一下你的公司与你开车,工作,购物,吃的和喝的,管理你的财务状况…毕竟一些应得的假期。鉴于平均团队规模和数量的团队代表,我们估计这个报告代表了成千上万个人的活动在这些领导组织测试人员。

关键的外卖

处于超高水平,这些高层组织的结果显示39%测试自动化…但假阳性高、低风险覆盖,非常缓慢的测试周期。下面是一些具体的外卖。

自动化不稳定

平均测试自动化率(39%)相对较高,但也是假阳性(22%)。这是常见的早期测试自动化工作缺乏稳定测试数据管理和实践服务虚拟化。

测试不一致的风险

需求覆盖率(63%)高,但风险覆盖率低(25%)。可能,团队致力于相同级别的测试资源每个需求,而不是把精力集中的功能最重要的业务。

开发和测试周期不同步

平均测试周期时间(23天)是非常不能适应当今快节奏的开发周期(87%的2018年2周或更少)。*这样冗长的测试周期,测试必然落后于发展。

质量高(一些)

缺陷报告泄漏率(3.75%)相当令人印象深刻的。**However, only about 10% of respondents tracked defect leakage, so the overall rate is likely higher. The organizations tracking this metric tend to be those with more mature processes.

伟大的基础

组织取得了良好进展掌握测试成功的基本要素(采用适当的角色,建立测试环境,培养一个协作文化)。

“连续”还没有发生…

很少有人实现测试自动化率> 75%或采用稳定实践服务虚拟化和测试数据的管理。鉴于此,有限的CI / CD集成并不奇怪。不过都是在组织的优先级列表。

最大的差距

最伟大的领导人和落后的地区差距每天执行的自动化测试的百分比,覆盖风险,缺陷漏进UAT,测试周期时间。

上面的改进目标

地区组织希望最大的短期改善(6个月内)覆盖风险,缺陷漏进UAT,假阳性率,测试周期时间。

关于这份报告

的完成18页纸的基准测试报告现在是可用的。它涵盖了:

• 如何领导和落后者关键的软件测试和质量指标有何不同188金宝搏官网登录app
• 大多数组织的立场而言,CI / CD集成、测试环境的策略,和其他关键过程元素
• 测试设计,自动化、管理和报告方法的趋势了
• 组织对提高测试在2021年的首要任务

这里有一个急转弯的一些数据点你就会发现:

在过去的2021年,我们将继续分享不同分析的数据集。期待看到报告趋势:

• 由工业
• 通过技术测试下
• 按地区
• 和有趣的相关性度量,实践和交付方法

脚注:

*http://www.ambysoft.com/surveys/188金宝搏官网登录appsoftwareDevelopment2018.html: ~:文本= % 20平均% 2 c % 20现代% 20团队% 20释放,生产% 20 2044% % 20日历% 20天。

* *一般< 10%被认为是可以接受的,< 5%是好的,,< 1%是例外