- Erste Schritte
- Studio
- Orchestrator
- Testing Robots
- Test Manager
Test Suite-Benutzerhandbuch
Testergebnisse
Die Testergebnisse in Test Manager enthalten Informationen über den Entwurf, die Ausführung, die Aktualisierung oder die Löschung der ausgeführten Testsätze.
Wenn Sie mit der Ausführung eines Testsatzes beginnen, durchläuft der Test Manager Folgendes:
- Eine Testausführung wird im Abschnitt Testergebnisse vom Test Manager erstellt. Dieser dient als Container für die Testergebnisse.
- Für jeden Testfall im ausgeführten Testsatz wird ein leeres Testfallprotokoll generiert. Dieses Protokoll ist an die Testausführung angehängt und enthält die zugehörigen Testergebnisse.
- Während die Ausführung fortgesetzt wird, füllt der Test Manager jedes Testfallprotokoll mit den Ergebnissen und zugehörigen Protokollinformationen aus.
Das folgende Diagramm zeigt den Prozess der Ausführung eines Testsatzes im Test Manager.
Dies hat zur Folge, dass nach der Ausführung eines Testsatzes Änderungen am Testsatz oder an den zugehörigen Testfällen keine Auswirkungen auf die Ergebnisse früherer Ausführungen haben. Auch wenn ein Testsatz gelöscht wird, bleiben alle Testausführungen unverändert.
Um Testausführungen anzuzeigen, öffnen Sie Testergebnisse in Test Manager. Die Ausführung jedes Tests wird als Testausführungseintrag aufgelistet. Wie die Testausführung hinter den Kulissen funktioniert, können Sie unter Testergebnisse nachlesen.
Durch die Analyse Ihrer Testausführung können Sie die folgenden Aktionen ausführen:
- Suchen Sie Testergebnisse, die manuell oder automatisch über den Orchestrator ausgeführt wurden.
- Überprüfen Sie den Fortschritt bei der Ausführung von Testausführungen.
- Untersuchen Sie Protokolle und Anhänge.
- Erstellen Sie Defekte in Ihrem Defektverwaltungssystem direkt über den Test Manager, wenn Sie ein Application Lifecycle Management-Tool integriert haben.
Standardmäßig werden die Testausführungen basierend auf dem Datum sortiert, an dem die Ausführung abgeschlossen wurde. Aktuell laufende und noch nicht abgeschlossene Vorgänge werden ganz oben angezeigt.
Anhand der Farbcodes, die jeder Testausführung zugewiesen sind, können Sie den Status wie folgt erkennen:
- Grün: Bestandene Testfälle.
- Rot: Fehlgeschlagene Testfälle.
- Grey: Testfälle ohne endgültiges Ergebnis, wie z. B. solche, die noch nicht ausgeführt wurden, aber Teil eines Testsatzes sind, der gerade ausgeführt wird.
Die Ergebnisse der automatisierten Testausführungen werden automatisch aus dem Orchestrator importiert. Damit Ihre automatisierten Tests in den Test Manager importiert werden können, müssen Sie die folgende Bedingung erfüllen: Der automatisierte Test muss Teil eines Testsatzes in Ihrem Test Manager-Projekt sein. Weitere Informationen finden Sie unter Automatisierte Tests.
Um detaillierte Ergebnisse aus einer Testausführung abzurufen, wechseln Sie zu Testergebnisse und klicken Sie auf einen Eintrag, um die detaillierte Ansicht zu öffnen. Eine typische Detailansicht einer Testausführung zeigt Informationen über den Beginn der Ausführung, die Dauer und Testfallprotokolle.
Mit dem Filter Meldedatum können Sie ein einziges Datum für alle Ergebnisse der Testausführung festlegen. Dies ist nützlich, wenn Sie Tests über Nacht ausführen, wo einige Testfälle vor und nach Mitternacht ausgeführt werden. Andernfalls werden die Ergebnisse in den Berichten auf verschiedene Daten verteilt.
Im Abschnitt „Ergebnisse“ können Sie alle Testfälle untersuchen, die innerhalb des Testsatzes ausgeführt wurden. Sie können für jeden Testfall Aktionen ausführen. Weitere Informationen finden Sie unter Testfallprotokolle.
Die Testfallprotokolle enthalten Informationen wie Schrittbeschreibungen, Fehlermeldungen und Screenshots, die während einer Testsatzausführung gesammelt wurden. Um ein Testfallprotokoll zu öffnen, wechseln Sie zu Testergebnisse, öffnen Sie eine Testausführung und klicken Sie dann auf einen Testfallschlüssel.
Sie können die Testfalldetails überprüfen, indem Sie auf das Symbol Testfall öffnen klicken.
Sie können Fehlerberichte inklusive des Ausführungsprotokolls für Ihr externes Fehlerverwaltungssystem erstellen, wenn Sie es bereits in Test Manager integriert haben. Weitere Informationen finden Sie unter Fehlersynchronisierung.
Sie können Ausführungsergebnisse im Rahmen der Integration von Application Lifecycle Management-Tools mit externen Tools synchronisieren. Informationen, die während der Ausführung gesammelt werden, z. B. Ergebnisse, Protokolle, Zeitstempel und andere Details, werden mit dem Tool synchronisiert, das Sie in Test Manager integriert haben.
Bitte beachten Sie, dass derzeit pro Projekt insgesamt nur eine Verbindung für die Defektsynchronisation aktiviert sein kann.
- Um Fehler zu synchronisieren, müssen Sie einen Connector in Test Manager konfigurieren. Sie können verfügbare Verbindungen im Test Manager anzeigen.
- Sie müssen zuerst einen Testsatz ausgeführt haben.
Sie können Defekte erstellen, wenn Sie auf die Testfallprotokolle auf der Seite Testergebnisse zugreifen.
Der Defekt wird erstellt und mit Ihrem externen Tool synchronisiert. Sie können den Defekt direkt im Tool öffnen (z. B. Atlassian Jira), indem Sie zum Ergebnis der Testausführung navigieren, das einen synchronisierten Defekt hat.
Wenn Sie die Verknüpfung von Fehlern mit einem externen Tool aufheben, bleibt der im Tool erstellte Eintrag unverändert. Im Test Manager wird das Ergebnis der Testausführung nicht mit einem externen Tool verknüpft.
- Zu den Testergebnissen navigieren
- Öffnen Sie ein Testergebnis und klicken Sie dann auf Aufgaben.
- Wählen Sie Verknüpfung mit Defekt aufheben aus.