AI智能总结
UiPath 测试套件的商业价值 莫琳 · 弗莱明IDC 全球智能过程自动化市场研究和咨询服务项目副总裁 Melinda - Carol Ballou研究总监 , 敏捷 ALM , 质量和投资组合策略 , IDC 马修 · 马登 IDC 业务价值战略实践研究副总裁 目录 3执行摘要 4情况概述 AI 和生成 AI 对提高效率的作用如何 ?.............................................................................. 4 UiPath 测试套件概述. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .6 UiPath 测试套件加速业务流程改进. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .8UiPath 测试套件对业务流程改进的影响. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .9 10UiPath 测试套件的商业价值 人口统计学............................................................. 10 UiPath 测试套件的选择和使用. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .11 UiPath 测试套件的业务价值和量化优势. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .13使用 UiPath 测试套件的 IT 员工效率优势. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .14应用程序稳定性、性能和停机优势. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .17开发活动和业务成果效益. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .21ROI 摘要. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .23 挑战 / 机遇 242532Conclusion来自赞助商的消息关于 IDC 分析师. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .30附录 1 : 方法论. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .26附录 3 : 补充数据. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .29附录 2 : 平均财务收益. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .27 执行摘要 本IDC研究通过跨行业采访UiPath测试套件的客户,以理解使用此解决方案所带来的长期益处。研究自动化测试的客户在商业价值评估中,在多个方面提高了开发人员和业务运营效率,例如减少了80%的非计划停机时间,提高了36%的质量,并显著提高了故障排查效率。参与组织进一步描述了在测试自动化和整体测试环境方面的稳健改进。实施UiPath测试套件还促进了新应用和功能的更快开发。 业务价值亮点 $400 万每个组织的年平均总收益 6 个月平均投资回报 IDC 的分析显示 , 为期六个月的投资回收期很短 , 三年期投资回报率为 529% 。 529%三年投资回报率 造成所提供利益的最重要因素包括 : 80%减少计划外停机造成的生产力损失 •质量保证(QA) 员工效率的提高 :在自动化和技能提升的帮助下 , QA 员工可以提供更高质量和更 及时的工作。 36%提高质量保证人员的效率 •缩短新应用程序和功能开发生命周期 : 开发团队在所有研究的关键绩效指标(KPIs)上实现了全面改进,并变得更加有效。 93%提高故障排除团队的效率 •减少了因计划外停机事件减少而造成的生产力损失和收入损失: 51%更高的开发团队生产力 不仅经过更充分测试的应用程序出现故障的频率更低,而且一旦发生意外停机事件,组织报告称能够更好地识别问题原因并解决问题。 $34,900每 100 个最终用户的生产率更高 • 提高最终用户效率 :得益于整体应用程序性能和可用性的提升以及开发团队效率的提高,最终用户实现了生产力的增加。 13%提高 IT 工程团队的效率 情况概述 高质量的软件推动并使业务创新和成功执行成为可能。这一对软件质量的追求也支撑着DevOpsinitiative和加快部署速度。IDC的研究显示,生成更高质量的应用程序是推动DevOps扩展的首要因素,其次是提高生产力和加快部署速度,根据IDC的数据。实践、工具和感知调查, 2023 年 1 月。 测试中的无效性问题和瓶颈仍是对软件快速发布构成重大障碍的因素。尤其是在环境日益复杂且具有混合特性的情况下,团队分布分散、竞争压力加大以及经济和地缘政治的不确定性等因素尤为突出。 即便我们的系统与运作日益数字化与自动化,生产环境中的软件停机时间和缺陷的成本及风险却前所未高。停机、缺陷以及可用性不足影响着组织、其声誉,以及在不断变化的环境中对业务和流程相关性的担忧。解决这些挑战需要对动态变化的敏捷响应,并持续投入于测试工作。 这一领域极为关键,预计软件开发人员、质量保证分析师和测试人员的招聘将比所有职业的平均水平增长得更快。根据美国劳工统计局的数据,从2022年到2032年,这一领域的就业人数预计将增长25%。职业展望手册 , 软件开发人员 , 质量保证分析师和测试人员 ,2023 年 9 月更新。 不断增加的需求和有限的供应将导致持续的QA和测试人员短缺。然而,如果测试中成功采用了自动化,那么由此带来的效率和质量提升可以减少所需测试人员的数量。 这是一个关键的机会,因为IDC的研究显示,在测试自动化方面存在成熟度不足的问题。尽管已经证明了自动化可以带来成本节约和效率提升,平均而言,组织仅自动化了其应用的47%,这意味着仍有53%的应用程序需要手动干预,根据IDC的数据。实践、工具和感知调查 ,January 2023。缺乏自动化是开发者表示他们无法完成所需工作的主要原因,其次是缺乏现代开发工具。 AI 和生成 AI 在提高效率方面的作用如何 ? 我们继续看到基于生成式人工智能(GenAI)的代码助手在开发生成软件方面的应用不断扩大,这带来了测试方面的自身机会和需求。 根据IDC的研究,在2023年,超过80%的开发者使用集成了自动补全或智能代码生成功能的集成开发环境(IDE)或代码编辑器,据IDC的数据。2023 年开发者观点 : 对全球 2500 名开发者的执行摘要调查, 2023 年 8 月。总的来说 , 根据开发人员视图调查,截至2023年上半年,超过60%的机器生成代码由三分之一的开发者生成,这些开发者自动生成了他们大部分的代码。大幅修订。总体而言 , 72 % 的开发人员修改了 40 % 以上的自动生成代码。 因此,尽管组织寻求通过通用人工智能(GenAI)副驾加速开发以提高效率,软件测试和质量是前提条件,从而进一步推动了测试需求的增长。 开发者预计在未来12至18个月内,生成式人工智能(GenAI)将在软件质量和测试方面带来最大的开发流程改进,其次是应用安全测试和漏洞管理,编写代码排在第三位(IDC)。生成的 AI 采用和态度 : 对美国开发人员的调查 ,五月(2023年)。这一发现强调了在软件测试背景下利用生成式人工智能(GenAI)的机会,同时突显了对应用于GenAI应用程序本身的高效质量策略的迫切需求。 增加对软件质量和测试需求的综合因素包括 : 随着成熟的DevOps方法在软件部署中缩短周期时间和提高执行速度,这导致了需要持续测试的数字执行需求。 • 跨平台、多模式的应用交付在不同形式因素下增加了复杂性,并要求采用有效的、细腻的测试方法。 • 随着应用程序数量急剧增加,测试需要实现规模效益以确保数字及其他环境中的质量、相关性和公司绩效。 • 客户体验质量驱动参与度。用户不会容忍丑陋、缓慢、无关、损坏或脆弱的软件——优秀的用户体验、业务流程工作流上下文和数字质量是成功执行业务的基础。 开发者快速采用生成式人工智能(GenAI)以加快代码生成,这将推动测试自动化、流程和组织策略的进一步采用。即使测试自动化提供商本身也在增强现有的人工智能和机器学习能力,加入GenAI元素。 UiPath 测试套件概述 总部位于纽约市并成立于2005年,UiPath在全球拥有超过4,000名员工,其中约80人直接支持Test Suite以及截至2024年第二季度公司约1,500家自动软件质量(ASQ)客户。UiPath在企业自动化领域的主导地位为其整体产品组合奠定了基础,并为其软件测试能力提供了差异化优势。在软件测试和质量领域,UiPath的产品包括UiPath Test Suite及其相关组件、TestManager、Studio、Orchestrator、Robots、Automation Cloud和Autopilot(该产品预计从2024年第二季度起全面可用)。 UiPath 测试套件由紧密集成的组件组成 : •测试管理器是一个用于管理测试流程的网络应用,包括分配自动化至测试案例、测试案例至需求、仪表板和报告、自动化执行以及手动测试。 •Studio用于通过低代码工作流编辑器创建和设计自动化测试,同时UiPath市场也提供了预制的自动化活动。 机器人在多台机器上并行执行自动化测试用例。 • Automation Cloud