测试套件是为测试执行分组而成的测试用例集合。测试套件可以包括手动和自动化测试,但是如果您有一系列无需看管就可运行的自动化测试时,测试套件给您带来的益处最大。运行套件时,可以指定是按顺序还是并行运行套件中的测试用例。以下方案显示了适用于测试套件执行的一个可能的工作流程。
- 创建测试用例。
- 可选:创建测试脚本并将其与测试用例关联。
注: 测试套件执行需要测试用例,但是每个测试用例不需要具有关联的测试脚本。
- 可选:将测试用例添加到测试计划。
测试计划帮助组织测试执行活动,但它不是测试执行的必备条件。通过在计划中同时包括测试用例和测试套件,您可以将套件的执行作为该计划的测试活动的组成部分进行规划。测试套件执行记录将在测试计划和测试计划迭代的上下文中运行。此外,所有测试套件执行结果(包括测试用例执行结果)都将与测试计划关联。针对这些结果而运行的所有报告都将包括相关联的测试计划信息。
- 分析环境中的现有测试用例和测试脚本,以确定哪些测试用例和测试脚本将属于新的测试套件。
在理想情况下,套件中的每个测试用例都表示方案的部分内容,例如用于模拟用户完成交易的元素。例如,测试套件可以包含 4 个测试用例,每个测试用例都包含单独的关联测试脚本:
- 测试用例 1:登录
- 测试用例 2:选择组织
- 测试用例 3:分配股利
- 测试用例 4:注销
- 创建新的测试套件。
- 可选:将测试套件添加到测试计划。
如步骤 3 所述,测试计划不是测试套件执行的需求,但可以帮助您组织测试活动。如果将测试套件添加到测试计划,请确保测试套件中包括的测试用例也是同一计划的组成部分。
- 将现有测试用例添加到测试套件。
请注意,测试用例在测试套件的“测试用例”部分中的顺序确定了它们在顺序测试套件执行中的执行顺序。
在测试套件中添加测试用例时,可以选择为套件中的每个测试用例分配所有者。
在运行已为测试用例分配了所有者的测试套件时,“测试套件执行”页面将显示套件中每个测试用例的所有者。
测试人员可以对所有者字段进行过滤,以查看测试套件中那些应由他们执行的测试用例。
- 为测试套件创建单个测试套件执行记录,或者为测试套件自动生成多个测试套件执行记录。
- 可选:为要执行的套件指定环境。如果要仅让套件测试一个环境,请在测试套件执行记录级别处指定测试环境。如果要测试混合环境,那么必须指定各个测试用例中的测试环境,而不是测试套件执行记录中的测试环境。实际上,除非在测试用例级别进行覆盖,否则测试套件执行记录中的环境是缺省规范。
- 运行测试套件。可以采用下列方法来运行测试套件:
- 在测试套件的“测试套件执行记录”部分中,选择现有的测试套件执行记录,然后单击运行图标。
- 打开测试套件,然后单击测试套件顶部的运行图标。选择现有的测试套件执行记录,或者指定创建新的测试套件执行记录。
- 在“运行测试套件”对话框中,指定执行设置:
- 并行运行此套件:运行测试套件时,您可以同时运行所有测试用例(并行方式),也可以逐个运行测试用例(顺序方式)。在此工作流程中,我们的测试用例表示一个活动序列(例如,您必须先登录,才可以选择组织)。要正确运行此测试,请取消选中并行运行此套件复选框以选择顺序方式。有时,您可能要同时运行所有测试用例。例如下列情况:脚本之间不互相依赖,并且您不需要采用任何特殊顺序来执行这些脚本。在那种情况下,您可以选择并行方式。
- 如果有任何测试未能成功完成,则停止执行套件:对于顺序测试套件执行,可以在其中一个测试用例未成功时停止测试套件。例如,如果对登录应用程序进行的测试失败或被阻塞,那么测试套件执行将停止,而不是转到对选择组织进行测试。
- 创建结果但不执行:使用此选项来记录测试套件的结果,但却不执行测试脚本。
或者,可以选择要排除在测试套件执行之外的测试用例:
- 查看测试套件执行结果并根据需要提交缺陷。
- 根据需要更新测试套件执行结果并保存这些结果。