Eine Testsuite besteht aus einer Gruppe von Testfällen, die für die Testausführung zusammengefasst werden. Testsuites können sowohl manuelle als auch automatisierte Tests enthalten, bieten jedoch besondere Vorteile, wenn Sie über eine Reihe automatisierter Tests verfügen, die unbeaufsichtigt ausgeführt werden können. Beim Ausführen einer Suite können Sie angeben, ob die Testfälle in der Suite nacheinander oder parallel ausgeführt werden sollen. Das folgende Szenario zeigt einen möglichen Workflow für die Testsuiteausführung.
Abbildung 1. Workflowdiagramm für die Testsuiteausführung
- Erstellen Sie Testfälle.
- Optional: Erstellen Sie Testscripts und verknüpfen Sie sie mit den Testfällen.
Anmerkung: Testfälle sind für die Testsuiteausführung erforderlich, es muss jedoch nicht jeder
Testfall mit einem Testscript verknüpft sein.
- Optional: Fügen Sie die Testfälle zu einem Testplan hinzu.
Mithilfe eines Testplans können Sie die Aktivitäten für die Testausführung verwalten, er stellt aber keine Voraussetzung für die Testausführung dar. Wenn Sie die
Testfälle und die Testsuite in einen Plan aufnehmen, können Sie die Ausführung der Suite im Rahmen der übrigen Testaktivitäten
einplanen. Testsuiteausführungsdatensätze werden im Kontext des Testplans und der Testplaniterationen ausgeführt.
Außerdem werden alle Ausführungsergebnisse der Testsuite (auch die Ausführungsergebnisse der Testfälle) dem Testplan
zugeordnet. Alle Berichte, die Sie aus diesen Ergebnissen erstellen, enthalten die zugehörigen Testplaninformationen.
- Wenn Sie die vorhandenen Testfälle und Testscripts in Ihrer Umgebung analysieren, können Sie feststellen, welche von ihnen zu der neuen Testsuite
gehören werden.
Im Idealfall steht jeder Testfall einer Suite für einen Teil eines Szenarios, z. B. für die Elemente, die die Ausführung einer Transaktion durch einen Benutzer simulieren. Eine Testsuite könnte
beispielsweise vier Testfälle mit jeweils einem eigenen Testscript umfassen:
- Testfall 1: Anmeldung
- Testfall 2: Organisation auswählen
- Testfall 3: Ausschüttungen zuordnen
- Testfall 4: Abmelden
- Erstellen Sie eine neue Testsuite.
- Optional: Fügen Sie die Testsuite zu einem Testplan hinzu.
Wie in Schritt 3 erwähnt ist ein Testplan keine Voraussetzung für die Ausführung einer Testsuite.
Er kann Ihnen jedoch helfen, Ihre Testaktivitäten zu organisieren. Wenn Sie die Testsuite zu einem Testplan hinzufügen, stellen Sie sicher,
dass die in der Suite enthaltenen Testfälle auch Teil dieses Testplans sind.
- Fügen Sie vorhandene Testfälle zu der Testsuite hinzu.
Denken Sie daran, dass die Reihenfolge der Testfälle im Abschnitt "Testfälle" der Testsuite
bestimmt, in welcher Reihenfolge die Testfälle bei einer sequenziellen Testsuiteausführung ausgeführt werden.
Wenn Sie einer Testsuite Testfälle hinzufügen, können Sie optional jedem Testfall in der Suite einen Eigner zuweisen. Bei der Ausführung einer Testsuite, bei der den Testfällen Eigner zugewiesen wurden,
werden die Eigner der einzelnen Testfälle der Suite auf der Seite für die
Testsuiteausführung angezeigt. Tester können nach dem Eignerfeld filtern, um die Testfälle in der Testsuite anzuzeigen, die sie ausführen sollen.
- Erstellen Sie für die Testsuite einen Testsuiteausführungsdatensatz oder generieren Sie automatisch mehrere
Testsuiteausführungsdatensätze.
- Optional: Geben Sie eine Ausführungsumgebung für die Suite an.
Wenn mit der Suite nur eine Umgebung getestet werden soll, geben Sie die Testumgebung auf der Ebene der Testsuiteausführungsdatensätze an. Soll eine heterogene Umgebung
getestet werden, müssen Sie die Testumgebungen in den einzelnen Testfällen und nicht im Testsuiteausführungsdatensatz angeben.
Die Umgebung im Testsuiteausführungsdatensatz ist grundsätzlich die Standardspezifikation, die jedoch auf Testfallebene
überschrieben werden kann.
- Führen Sie die Testsuite aus. Dafür gibt es die folgenden Möglichkeiten:
- Wählen Sie im Abschnitt "Testsuiteausführungsdatensätze" einer Testsuite einen vorhandenen
Ausführungsdatensatz aus und klicken Sie auf das Symbol Ausführen.
- Öffnen Sie eine Testsuite und klicken Sie oben auf das Symbol Ausführen. Wählen Sie einen vorhandenen Testsuiteausführungsdatensatz
aus oder geben Sie an, dass ein neuer Datensatz erstellt werden soll.
- Geben Sie im Dialogfenster "Testsuite ausführen" die Ausführungseinstellungen an.
- Diese Testsuite parallel ausführen: Sie können alle Testfälle Ihrer Testsuite
gleichzeitig ausführen (Parallelmodus) oder einzeln nacheinander (sequenzieller Modus). In diesem Workflow stellen die Testfälle
eine Abfolge von Aktivitäten dar. (Sie müssen sich beispielsweise anmelden, um eine Organisation auswählen zu können.) Löschen Sie die Markierung
im Kontrollkästchen Diese Testsuite parallel ausführen, damit dieser Test korrekt ausgeführt wird. In anderen Fällen könnten Sie sich für eine
gleichzeitige Ausführung Ihrer Testfälle entscheiden. Dies ist beispielsweise möglich, wenn die Scripts nicht voneinander abhängen und in keiner bestimmten Reihenfolge
ausgeführt werden müssen. Wählen Sie dann den parallelen Modus aus.
- Suiteausführung bei nicht bestandenem Test
stoppen: Die sequenzielle Testsuiteausführung kann gestoppt werden, wenn ein Testfall nicht bestanden wird. Wenn beispielsweise der Test für die Anmeldung bei der Anwendung
fehlschlägt, wird die Testsuiteausführung gestoppt und nicht mit der Auswahl einer Organisation fortgesetzt.
- Ergebnis ohne Ausführung erstellen: Verwenden Sie diese Option, um Ergebnisse für die Testsuite zu erfassen, ohne
die Testscripts auszuführen.
Sie können optional Testfälle auswählen,
die von der Testsuiteausführung ausgeschlossen werden sollen:
- Zeigen Sie die Ausführungsergebnisse für die Testsuite an und übergeben Sie bei Bedarf Defects.
- Aktualisieren Sie die Ergebnisse der Testsuiteausführung nach Bedarf und speichern Sie die Ergebnisse.