Testsuite ausführen

Eine Testsuite ist eine Gruppe von Testfällen, die für die gemeinsame Ausführung zusammengefasst werden. Sie können eine Testsuite ausführen, indem Sie die Testsuite öffnen oder indem Sie das Fenster Testsuites anzeigen öffnen.

Informationen zu diesem Vorgang

Sie können die Testfälle in Ihrer Testsuite nacheinander (sequenziell) oder parallel ausführen. Bei der sequenziellen Ausführung einer Testsuite wird ein Testfall erst ausgeführt, nachdem der vorherige Testfall in der Folge abgeschlossen wurde. Wenn Sie eine Testsuite parallel ausführen, können alle Testfälle gleichzeitig ausgeführt werden.

Nachdem die Tests gestartet wurden, können Sie Testsuiteausführungen über die Konsole für die Testsuiteausführung anhalten. Sie können Testsuiteausführungen anhalten, wenn für ein System, das gerade getestet wird, kleinere Anpassungen erforderlich sind, bevor die Tests fortgesetzt werden können.

Wenn Sie eine Testsuiteausführung anhalten, werden alle manuellen Testausführungen, die Teil der Suite sind, ebenfalls angehalten. Wenn Sie einen Test anhalten, während ein automatisierter Test ausgeführt wird, wird dieser Test abgeschlossen. Automatisierte Tests, die noch nicht gestartet wurden, werden jedoch nicht ausgeführt. In beiden Fällen wird die Testsuite angehalten. Sie können angehaltene Testsuites über die Konsole für die Testsuiteausführung, die Listenansicht der Testsuiteausführungsdatensätze oder den Editor für Testsuiteausführungsdatensätze fortsetzen.

Sie können Testsuites über die Konsole für die Testsuiteausführung stoppen. Nicht fertiggestellte Testfälle in dieser Suite werden als unvollständig markiert. Gestoppte Testsuites können nicht fortgesetzt werden.

Vorgehensweise

  1. Öffnen Sie eine Testsuite.
    Anmerkung: Sie können eine Testsuite erst ausführen, wenn sie gespeichert wurde.
  2. Klicken Sie in der rechten oberen Ecke des Testsuite-Fensters auf das Symbol Testsuite ausführen (Wiedergabe).
  3. Wählen Sie im Abschnitt "Testsuiteausführungsdatensätze" entweder einen Testsuiteausführungsdatensatz aus oder erstellen Sie einen Ausführungsdatensatz, indem Sie die Standardoption Neuer Testsuiteausführungsdatensatz akzeptieren. Wenn Sie einen Ausführungsdatensatz erstellen, wählen Sie den Testplan, die Testiteration und die Testumgebung aus.
    Anmerkung: Falls in einem Ihrer Ausführungsdatensätze die von Ihnen angegebenen Werte für den Testplan, die Testiteration und die Testumgebung bereits verwendet werden, wird dieser Ausführungsdatensatz verwendet und kein neuer erstellt.
  4. Optional: Wählen Sie einen Kanal aus. Bei der Ausführung der Testsuite wird das Standard-Script für den Kanal mithilfe der Schlüsselwörter in dem Script ausgewählt. Welche Kanäle verfügbar sind, hängt von der ausgewählten Testumgebung ab.
  5. Optional: Wählen Sie eine Testzelle aus. Wenn die Testsuite automatisierte Testfälle enthält, können Sie die Testzelle für die Ausführung der Testsuite angeben. Alle automatisierten Testfälle werden auf die Testautomatisierungsadapter in der angegebenen Testzelle verteilt.
  6. Optional: Wenn Ihre Testsuite Testfälle mit automatisierten Testscripts enthält, können Sie mehrere Testfälle auswählen und allen denselben Adapter zuweisen. Wählen Sie die Kontrollkästchen neben den Testfällen aus und klicken Sie dann auf das Symbol Maschine für diesen Test auswählen (Maschine für diesen Test auswählen).
    Anmerkung: Die meisten automatisierten Testadapter können immer jeweils nur ein Script ausführen. Wenn Sie denselben Adapter für mehrere Testfälle auswählen, werden die Scripts dieses Adapters nacheinander ausgeführt. Um Scripts parallel auszuführen, müssen Sie für jedes Script einen anderen Adapter auswählen.
  7. Optional: Geben Sie die Testfälle an, die von der Testsuiteausführung ausgeschlossen werden sollen. Wenn Sie keine Testfälle ausschließen, werden alle Testfälle in der Suite in die Testsuiteausführung eingeschlossen. Zum Überspringen von Testfällen führen Sie eine oder beide der folgenden Aktionen aus:
    • Wenn Sie einen Testsuiteausführungsdatensatz ausgewählt haben, können Sie alle Testfälle, die während der letzten Ausführung des Testsuiteausführungsdatensatzes bestanden haben, überspringen. Klicken Sie auf das Symbol Bestandene von der Ausführung ausschließen (Bestandene Testfälle ausschließen).
    • Wenn Sie bestimmte Testfälle überspringen möchten, wählen Sie die Testfälle in der Tabelle aus und klicken Sie auf das Symbol Von der Ausführung ausschließen (Ausführung ausschließen).
    Alle von Ihnen ausgewählten Testfälle werden in der Spalte "Von der Ausführung ausschließen" mit einem Symbol markiert und bei der Ausführung der Testsuite nicht berücksichtigt. Wenn Sie alle Testfälle in die Testsuiteausführung einschließen möchten, wählen Sie die Testfälle erneut aus und klicken Sie auf das Symbol Von der Ausführung ausschließen (Ausführung ausschließen).
  8. Um die Ergebnisse dieses Testlaufs mit einem Build-Datensatz zu verknüpfen, klicken Sie auf das Symbol Zugeordneten Build ändern (Zugeordneten Build ändern) neben der Option Build-Datensatz und wählen einen Build-Datensatz aus. Das Ausführungsergebnis dieses Testlaufs wird automatisch mit dem von Ihnen ausgewählten Build-Datensatz verlinkt.
  9. Wählen Sie Ausführung planen und anschließend ein Datum und eine Uhrzeit aus, um die Testsuite für die Ausführung in der Zukunft zu planen.
  10. Wählen Sie aus, ob die Testfälle in der Suite parallel ausgeführt werden sollen.
  11. Wenn Sie die Option zum sequenziellen Ausführen der Tests ausgewählt haben, können Sie weitere Optionen auswählen:
    • Wenn Sie in Ihren Testscripts Ausführungsvariablen verwenden und Sie deren Werte während der Ausführung der Testsuite zwischen Scripts übergeben möchten, wählen Sie Ausführungsvariable(n) zwischen Scripts übergeben aus.
    • Um festzulegen, dass die Testsuite gestoppt werden muss, falls ein einzelner Testfall scheitert, wählen Sie Suiteausführung bei nicht bestandenem Test stoppen aus. Diese Option ist sinnvoll, wenn die Ausführung eines Testfalls in einer Testsuite vom Erfolg vorhergehender Testfälle abhängig ist.
  12. Wenn Sie für diesen Test ein Ergebnis dokumentieren möchten, ohne die Scripts auszuführen, wählen Sie Ergebnis ohne Ausführung erstellen und dann ein Ergebnis aus.
  13. Wenn Sie die Werte der in Ihrer Testsuite definierten Ausführungsvariablen temporär modifizieren möchten, klicken Sie auf Wert(e) von Ausführungsvariablen modifizieren.
  14. Öffnen Sie die Konsole für die Testsuiteausführung, indem Sie auf Ausführen klicken.
    Ausführungskonsole für Testsuites
    Bei der sequenziellen Ausführung von Tests wird in der Konsole der erste Testfall der Folge angezeigt. Bei der parallelen Ausführung von Tests beginnt die Ausführung der automatisierten Testfälle, und die manuellen Testfälle oder Testfälle ohne Scripts werden in der Konsole angezeigt.
  15. Handelt es sich beim ersten Testfall in der Testsuite um einen manuellen Test, klicken Sie auf Manuellen Test starten.Wenn der erste Testfall in der Suite nicht über ein zugehöriges Testscript verfügt, starten Sie den Test, indem Sie in der Spalte "Testfallfortschritt" auf Testfall ausführen klicken.

    Ist der erste Testfall in der Suite ein automatisierter Test, wird der Test automatisch ausgeführt.

  16. Führen Sie bei manuellen Tests die Schritte im Fenster manuelle Testausführung aus und klicken Sie anschließend auf Schließen. Zeichnen Sie für Testfälle ohne Scripts ein Ergebnis für den Testfall auf und klicken Sie auf Speichern und schließen. Bei der Ausführung von manuellen Scripts oder von Testfällen ohne Scripts im parallelen Modus können Sie jederzeit zur Konsole für die Testsuiteausführung zurückkehren und die Ausführung eines weiteren Testfalls in der Suite starten.
  17. Nach Abschluss eines Testfalls können Sie das Ausführungsergebnis für den Testfall anzeigen, indem Sie auf das Symbol in der Spalte "Ergebnis" klicken. Das Ausführungsergebnis schließt das bearbeitbare Feld Tatsächliches Ergebnis und weitere Details zu den Testartefakten und zu der zum Testfall gehörigen Testumgebung ein.
  18. Aktualisieren Sie die Ausführungsergebnisse bei Bedarf und speichern Sie Ihre Aktualisierungen. Beispielsweise können Sie im Abschnitt "Ergebnisdetails" eine detaillierte Beschreibung der Testergebnisse angeben.
  19. Klicken Sie zur Übergabe eines Defects im Abschnitt "Änderungsanfragen" auf das Symbol Neuen Defect erstellen (Neuen Defect erstellen) oder auf das Symbol Mit vorhandenem Defect verlinken (Link zu vorhandenem Defect). Geben Sie in dem angezeigten Defect-Formular Informationen zu dem Problem an und speichern Sie die Seite.
    Tipp: Wenn Sie Rational ClearQuest als Defect-Provider konfiguriert haben und mit Internet Explorer arbeiten, wird bei dem Versuch, einen Defect oder einen Link zu einem Defect zu erstellen, ein Fenster mit einer Sicherheitswarnung geöffnet. Klicken Sie in Internet Explorer 7 auf Ja und in Internet Explorer 8 auf Nein, um das Defect-Formular zu öffnen.
  20. Führen Sie die verbleibenden Testfälle in der Suite aus. Wenn Sie die Testsuiteausführung zu einem späteren Zeitpunkt beenden möchten oder wenn ein anderer Tester für den nächsten Testfall zuständig ist, schließen Sie die Seite. Sie können später zur Testsuiteausführung zurückkehren.
    Wenn Sie die Ausführungskonsole für Testsuites während einer Testsuiteausführung schließen, können Sie wie folgt dazu zurückkehren:
    • Klicken Sie auf Ausführung > Testfallausführungsdatensätze anzeigen und anschließend auf das Symbol Letztes Ergebnis.
    • Klicken Sie auf Ausführung > Ausführungskonsole und suchen Sie den Testfall, der als Bestandteil der Testsuite ausgeführt werden muss. Klicken Sie in der Spalte "Testsuitefortschritt" auf den Link.
    • Öffnen Sie einen Testplan und klicken Sie im Abschnitt "Testsuiteausführungsdatensätze" auf das Symbol Letztes Ergebnis.

Ergebnisse

Wenn Sie die Ergebnisse zu einem späteren Zeitpunkt anzeigen möchten, klicken Sie im Hauptmenü auf Ausführung > Durchsuchen > Testsuiteergebnisse.


Haben Sie ein Problem oder eine Frage? Veröffentlichen Sie sie im Jazz.net Forum.