UiPath测试套件的商业价值

UiPath 测试套件的商业价值 Maureen Fleming全球智能流程自动化市场研究与分析服务程序副总裁，IDC Melinda-Carol BallouIDC敏捷ALM、质量与投资组合战略研究总监 Matthew MardenIDC商业价值策略实践研究副总裁 目录 3执行摘要 4情况概述 关于AI和生成式AI在提高效率方面的作用是什么？……………...………...………...……...………...……...……...…… UiPath 测试套件概述. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .6 UiPath测试套件加速业务流程改进。. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .8UiPath测试套件对企业流程改进的影响. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .9 10UiPath测试套件的商业价值 研究人口统计。 . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . UiPath 测试套件的选择和使用. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .11 UiPath测试套件的商业价值与量化收益. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .13使用UiPath测试套件提升IT人员效率的益处. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .14应用稳定性、性能以及停机时间效益. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .17发展规划活动及经营成果收益. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .21ROI Summary. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .23 挑战/机遇 2532结论赞助商的信息关于IDC分析师. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .30附录1：方法论. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .26附录 3：补充数据. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .29附录2：平均财务收益. . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . . .27 执行摘要 ：本研究由IDC进行，涉及对跨行业使用UiPath测试套件的客户进行访谈，以了解该解决方案为组织带来的长期效益。参与此项业务价值评估的测试自动化客户在多个方面提升了开发和业务运营，例如将非计划停机时间减少80%，将质量提高36%，以及显著提升故障排除效率。参与的组织进一步描述了在测试自动化和整体测试环境方面的显著改进。实施UiPath测试套件还促进了新应用程序和功能的快速开发。 商业价值亮点 $4 million每个组织的平均年总收益 6个月平均投资回收期 IDC的分析显示，投资回收期仅为六个月，同时三年回报率（ROI）达到529%。 529%三年投资回报率 在促成已实现收益的最重要因素中包括： 80%由非计划性停机导致的生产力损失减少 •质量保证（QA）人员效率的提高：借助自动化和技能提升，质量保证人员能够提供更高质量和更及时的工作。 36%质量保证人员效率的提高 •缩短新应用程序和功能开发的生命周期： 开发团队报告了所有研究的关键绩效指标（KPIs）全面改善，并且更有效率。 93%故障排除团队效率的提升 •因非计划停机事件发生次数减少，降低了生产效率损失和收入损失。 51%更高的开发团队生产力 不仅经过更充分测试的应用程序故障率更低，而且一旦发生计划外的停机事件，组织报告称其识别原因和解决问题的能力有所提高。 $34,900每100个终端用户更高的生产力 • 提升终端用户效率：得益于应用性能和可用性的整体改进以及开发团队效率的提高，终端用户能够实现生产力的提升。 13%IT工程团队效率的提升 情况概述 高质量软件驱动并支持业务创新与成功实施。这种对软件质量的追求也奠定了DevOps计划并提升了部署速度。IDC的研究显示，生成更高质量的应用程序是扩展DevOps的首要驱动力，其次是提高生产力和加快部署，根据IDC。实践、工具和认知调查, 2023年1月。 测试效率低下和瓶颈仍然是更快发布软件的一个重大障碍。尤其是在环境变得更加复杂和混合，并且存在分散的团队、竞争压力以及经济和地缘政治波动的情况下，这一点尤为突出。 即使我们的系统和运营正变得越来越数字化和自动化，生产环境中的软件停机时间和缺陷成本与风险也前所未有地高。停机时间、缺陷以及可用性不足会影响组织、其声誉，以及人们对在变化环境中业务和流程相关性的关注。应对这些挑战需要对动态变化做出敏捷响应，并投资于持续测试。 根据美国劳工统计局的数据，该领域至关重要，预计招聘软件开发人员、质量保证分析师和测试人员的增速将远超所有职业的平均水平，2022年至2032年期间预计增长25%。职业展望手册，软件开发人员，质量保证分析师和测试人员，更新于2023年9月。 日益增长的需求和有限的供给将导致持续的QA和测试人员短缺。然而，当测试自动化得到成功应用时，由此带来的效率和质量提升可以减少所需的测试人员。 这是关键机遇，因为IDC的研究表明，在测试自动化方面缺乏成熟度。尽管已证明能节省成本和提高效率，但据IDC统计，平均而言，组织仅自动化了其应用程序的47%，这意味着有53%的应用程序需要人工干预。实践、工具和认知调查，2023年1月。缺乏自动化是开发者表示他们无法完成所需工作的主要原因，其次是缺乏现代开发工具。 人工智能和生成式人工智能在提高效率方面的作用是什么？ 我们继续观察到在生成软件开发中，基于生成式人工智能（GenAI）的代码助手的使用正在扩大，这带来了其自身的机会和对测试的需求。 2023年，IDC的研究发现，超过80%的开发者使用具有自动补全或智能代码生成功能的一体化开发环境（IDE）或代码编辑器，根据IDC的Developer View 2023: 2500名全球开发者的执行摘要调查, 2023年8月。并且总体而言，根据Developer View调查，截至2023年上半年，三分之一的主要使用自动生成代码的开发商中，超过60%的机器生成代码需要大幅修订。总体而言，72%的开发人员修改了超过40%的自动生成代码。 因此，即使组织试图通过生成式人工智能助手来加速开发以提高效率，软件测试和质量仍然是先决条件，推动了对测试的进一步需求。 ：开发者还认为，在接下来12至18个月，软件质量和测试是使用GenAI进行开发过程中预期收益最高的领域，其次是应用安全测试和漏洞管理，作为第二领域，编写代码位列第三（IDC生成式人工智能的采用与态度：对美国开发者的调查2023年5月）。这一发现强调了在软件测试的背景下利用生成式人工智能（GenAI）的机会，以及针对生成式人工智能应用本身急需有效的质量策略。 导致对软件质量和测试需求增加的联合因素包括： • 采用成熟的DevOps方法压缩了软件部署的周期时间并提升了速度，这导致了对数字化执行的需求，需要持续进行测试。 • 跨平台、多模式应用交付在不同形态下增加了复杂性，并要求采用有效且细致的测试方法。 • 大量不断增长的应用程序要求测试的规模经济，以帮助确保数字和其他环境下的质量、相关性和公司绩效。 • 客户体验质量驱动参与度。用户无法忍受丑陋、缓慢、不相关、损坏或/和易受攻击的软件——卓越的用户体验、业务流程工作流上下文和数字质量是成功业务执行的基础。 开发者快速采用生成式人工智能以实现更快代码生成，将推动测试自动化、流程和组织策略的进一步采用，即使测试自动化供应商自身也利用生成式人工智能增强现有的人工智能和机器学习能力。 UiPath 测试套件概述 位于纽约市并成立于2005年的UiPath，在全球拥有超过4,000名员工，截至2024年第二季度，其中约80人直接支持测试套件及其约1,500名自动化软件质量（ASQ）客户。UiPath在企业自动化领域的领先地位是其整体产品组合的基础，并为其实施软件测试能力提供了差异化。在软件测试和质量背景下，UiPath的产品包括测试套件及相关组件、测试管理器、工作室、编排器、机器人、自动化云和自动驾驶（从2024年第二季度起将向测试套件通用提供）。 UiPath 测试套件由紧密集成的组件组成： •测试经理是一个用于管理测试流程的Web应用程序，包括将自动化分配给测试用例和测试用例分配给需求、仪表板和报告、自动化执行以及手动测试。 •工作室用于通过低代码工作流编辑器创建和设计自动化测试。UiPath Marketplace还提供预构建的自动化活动。 • 机器人并行在多台机器上执行自动化测试用例。 • 自动化云为UiPath产品组合提供云访问。 •自动驾驶系统是生成式AI、专业AI和自动化相结合，允许用户使用自然语言自动化工作。Test Suite的Autopilot将加速测试生命周期阶段，从需求生成测试，并从执行结果中揭示可操作的见解。 原生地，U