Ausführen von Tests

Sie können Tests entweder manuell oder automatisch ausführen. Manuelle Testausführungen werden über Test Manager gestartet, während automatisierte Ausführungen über Test Manager gestartet und über den Orchestrator ausgeführt werden. Um Ihre Testfälle auszuführen, müssen Sie zuerst einen Testsatz erstellen, der danach ausgeführt wird.

Bedingungen

• Sie können die Optionen Manuell ausführen und Automatisch ausführen sowohl für im Test Manager erstellte Testsätze als auch für die im Orchestrator verknüpften Testsätze verwenden.
• Es werden nur die im Testsatz enthaltenen Testfallversionen ausgeführt. Wenn Sie neue Testfälle ausführen möchten, müssen Sie Ihrem Testsatz neue Versionen zuweisen. Bei Orchestrator-Testsätzen müssen Sie sicherstellen, dass die neuesten Pakete veröffentlicht werden.

Automatisierte Ausführung

Die automatisierte Ausführung bezieht sich auf Testsätze, die vom Orchestrator her verknüpft wurden, oder auf Testsätze, die in Test Manager erstellt wurden und über Testfälle verfügen, die von Studio her verknüpft sind.

Bevor Sie automatisierte Tests in Test Manager ausführen, stellen Sie sicher, dass Sie Testsätze im Orchestrator erstellen.

Manuelle Ausführung

Die manuelle Ausführung bezieht sich auf im Test Manager erstellte Testsätze, inklusive der Testfälle, die über manuelle Schritte verfügen. Die manuelle Ausführung kann sowohl für die im Test Manager erstellten Testsätze als auch für die im Orchestrator verknüpften Testsätze erfolgen.

Ausführen von manuellen Tests

Testsätze manuell ausführen

Sowohl Test Manager-Testsätze als auch Testsätze, die vom dem Orchestrator her verknüpft wurden, können manuell ausgeführt werden, wenn für die Testfälle manuelle Schritte definiert wurden. Weitere Informationen finden Sie unter Ausführen von Tests.

1. Öffnen Sie Ihr Projekt im Test Manager und navigieren Sie dann zu Testsätze.
2. Wählen Sie einen Testsatz aus und klicken Sie auf die drei vertikalen Punkte.
3. Wählen Sie Manuell ausführen aus. Der Assistent für die manuelle Ausführung wird in einem neuen Fenster geöffnet. Stellen Sie sicher, dass Ihr Popup-Blocker das Öffnen des Fensters zulässt.

Weitere Informationen zu Testergebnissen finden Sie unter Analysieren von Testergebnissen.

Hinweis:

• Testfälle, die keine manuellen Schritte enthalten, werden bei der Ausführung ohne Ergebnis übersprungen.
• Bei automatisierten Testfällen können manuelle Schritte definiert und auch manuell ausgeführt werden.

Alternativ können Sie Ihren Testsatz öffnen, auf Ausführen klicken und aus der Dropdownliste Manuell auswählen.

Assistent für manuelle Ausführung

Mit dem Assistenten für die manuelle Ausführung können Sie eine Reihe manueller Tests nacheinander durchführen. Um zum nächsten Testfall im Testsatz zu gelangen, müssen Sie bei jedem manuellen Schritt ein Ergebnis festlegen.

Mit dem Assistenten für die manuelle Ausführung können Sie die einzelnen Schritte entweder als bestanden oder als nicht bestanden markieren.

Verwenden Sie Satz fehlgeschlagen oder Satz bestanden, um in jedem Fall einen Schritt zu markieren. Fügen Sie Kommentare hinzu, insbesondere im Falle eines Fehlers, um Details zum jeweiligen Ergebnis bereitzustellen. Sie können verschiedene aufeinanderfolgende Schritte als bestanden festlegen, indem Sie auf Bis hierher bestanden klicken.

Sobald dem letzten Schritt eines Testfalls ein Ergebnis zugeordnet ist, können Sie auf Weiter klicken. Dadurch können Sie aus dem Testsatz zum nächsten Testfall wechseln. Wenn Sie mit dem letzten Testfall fertig sind, wird die Ausführung durch Klicken auf Fertig vollständig abgeschlossen.

Ausführen automatisierter Tests

Sie können alle Testsätze mit Automatisiert ausführen ausführen. Der Orchestrator wird für Testfälle aufgerufen, die mit Test Manager verknüpft wurden. Um Testsätze auszuführen, die vom Orchestrator her verknüpft sind, stellen Sie sicher, dass Sie Ihre Testsätze im Orchestrator erstellen.

Sie können auch automatisierte Tests ausführen, wenn der Testsatz Testfälle enthält, die von Studio her verknüpft sind. Weitere Informationen finden Sie unter Ausführen von Tests.

Bedingungen

Wichtig: Um die Option „ Automatisch ausführen“ zu verwenden, benötigen Sie mindestens einen automatisierten Testfall in einem Testsatz.

• Die Testausführung für Testsätze, die vom Orchestrator her verknüpft sind, enthält nur die Testfälle, die in der neuesten Paketversion im Orchestrator-Feed mit Mandantenprozessen veröffentlicht wurden. Wenn Sie neue Testfälle ausführen möchten, müssen Sie eine neue Paketversion im Orchestrator veröffentlichen und dann den Testsatz mit dem Test Manager verknüpfen.
• Wenn Ihr Testsatz im Test Manager Testfälle aus mehreren Studio-Projekten enthält, wird das Projekt zur Ausführung herangezogen, das die höchste Anzahl von Testfällen aufweist. Daher werden nur die Testfälle aus diesem Projekt ausgeführt. In diesem Fall wird im Test Manager die folgende Meldung angezeigt: „Es wurden Testfälle aus mehreren Paketen ausgewählt. Einige der Testfälle werden beim Ausführen dieses Testsatzes nicht ausgeführt.“

  You can execute test sets including test cases from multiple Studio projects, only if you have a test set linked from Orchestrator.

• Wenn Ihr Testsatz Testfälle enthält, die sich in mehreren Studio-Projekten wiederholen, erfolgt die Sortierung nach dem Projektnamen in absteigender Reihenfolge. Es werden nur die Testfälle aus dem Projekt ausgeführt, das in der Liste an erster Stelle steht.

Automatisierte Testsätze ausführen

1. Öffnen Sie Ihr Projekt im Test Manager und navigieren Sie dann zu Testsätze.
2. Wählen Sie einen Testsatz aus und klicken Sie auf die drei vertikalen Punkte.
3. Wählen Sie Automatisiert ausführen aus.

   Weitere Informationen zu Testergebnissen finden Sie unter Analysieren von Testergebnissen.

   Hinweis:

   • Testfälle, die nicht ausgeführt werden können, werden bei der Ausführung im Orchestrator übersprungen.
   • Testfälle, die nicht ausgeführt werden, generieren Testfallprotokolle ohne Ergebnis.

Alternativ können Sie Ihren Testsatz öffnen, auf Ausführen klicken und in der Dropdownliste Automatisiert auswählen.

Konfigurieren des Standard-Timeouts für die Testausführung

Gehen Sie folgendermaßen vor, um das standardmäßige 12-Stunden-Ausführungs-Timeout zu ändern:

1. Suchen Sie die Datei in Ihrem Orchestrator Automation Suite- Installationsordner.
2. Öffnen Sie die Datei und fügen Sie die TestAutomation.TestSetExecutionTimeoutMinutes -Einstellung hinzu.

   <add key="TestAutomation.TestSetExecutionTimeoutMinutes" value="40" />

3. Der Wert der Einstellung TestAutomation.TestSetExecutionTimeoutMinutes ist die erforderliche Timeoutdauer.

   Der Wert, ausgedrückt in Minuten, stellt die Dauer dar, nach der Ihre Testausführungen als Abgebrochen markiert werden.

Erneutes Ausführen von Testausführungen

Wenn Sie eine Testausführung erneut ausführen, werden die alten Ausführungsergebnisse gelöscht und durch die neuen Ergebnisse ersetzt. Wenn Sie ein Testausführungsergebnis nicht ersetzen möchten, führen Sie den Testsatz erneut aus. Dadurch werden neue Testausführungsergebnisse generiert, die von den vorherigen unabhängig sind.

Die vordefinierten Benutzerrollen, die erneute Ausführungen durchführen können, sind: Test Manager, Test Executor und Manual Tester.

Erneutes Ausführen von Testsatzausführungen

1. Wechseln Sie zu Testergebnisse und wählen Sie eine der folgenden Optionen aus:
   • Weitere Optionen auswählen für die Testausführung, die Sie wiederholen möchten.
   • Öffnen Sie die Testausführung und wählen Sie Aufgabenaus.
2. Wählen Sie eine der folgenden Optionen aus:
   • Manuell erneut ausführen (nur für manuelle Testausführungen verfügbar)
   • Automatisiert erneut ausführen (nur für automatisierte Testausführungen verfügbar)
   Das Dialogfeld „ Erneut ausführen “ wird angezeigt.
3. Wählen Sie Bestätigen aus, und führen Sie die manuellen Schritte aus, oder warten Sie, bis der automatisierte Testsatz abgeschlossen ist.
   Hinweis:

   Beim erneuten Ausführen von Testsatzausführungen wird die Aktivitätsabdeckung nicht mehr angezeigt.

Erneutes Ausführen von Testfallausführungen

Sie können eine oder mehrere Testfallausführungen erneut ausführen. Bei datengesteuerten Testfällen können Sie jeweils nur eine Testfallausführung erneut ausführen. Sie können datengesteuerte Testfallausführungen nicht in großen Mengen erneut ausführen.

Hinweis: Auch wenn Sie eine neuere Version des Testfalls veröffentlichen, ist die Version, die Sie erneut ausführen, dieselbe Version, die in der Testausführung aufgezeichnet wird.

1. Wechseln Sie zu Testergebnisse und öffnen Sie eine Testsatzausführung.
2. Aktivieren Sie die Kontrollkästchen für eine oder mehrere Testfallausführungen und wählen Sie dann Auswahl erneut ausführenaus.
   
   

   

   
   
3. Wählen Sie eine der folgenden Optionen aus:
   • Manuell erneut ausführen (nur für manuelle Testausführungen verfügbar)
   • Automatisiert erneut ausführen (nur für automatisierte Testausführungen verfügbar)
   Das Dialogfeld „ Erneut ausführen “ wird angezeigt.
4. Wählen Sie Bestätigen aus, und führen Sie die manuellen Schritte aus, oder warten Sie, bis der automatisierte Testfall abgeschlossen ist.

Fehlerbehebung bei automatisierten Ausführungen

Die Automatisierung ist bereits mit einem anderen Testfall im Test Manager verknüpft.

Problembeschreibung

Wenn Sie versuchen, einen Studio-Testfall zu verknüpfen, der bereits mit einer anderen Test Manager-Instanz verknüpft ist als der, in der Sie gerade arbeiten, wird die folgende Meldung angezeigt: „Die Automatisierung ist bereits mit einem anderen Testfall im Test Manager verknüpft.“

Lösung

Sie können die Verknüpfung des Testfalls nicht direkt aufheben. Sie können dies jedoch umgehen, indem Sie den Testfall in einen Workflow konvertieren und ihn dann wieder in einen Testfall umwandeln. Dieser Vorgang ändert die Testfall-ID, so dass er mit Ihrer aktuellen Test Manager-Instanz verknüpft werden kann, ohne jedoch die zugrunde liegende Logik des Testfalls zu ändern.

Weitere Informationen zum Konvertieren eines Workflows in einen Testfall finden Sie unter Workflow in Testfall konvertieren.

Die automatisierte Ausführung konnte nicht gestartet werden, da das Paket in Orchestrator nicht gefunden wurde. Nur Testfälle aus Paketen, die in Orchestrator veröffentlicht wurden, können ausgeführt werden.

Lösung

Sie müssen das Studio-Paket im Orchestrator veröffentlichen. Dieses Problem tritt auf, wenn ein Testfall von Studio mit dem Test Manager verknüpft wird, das Paket jedoch noch nicht im Orchestrator veröffentlicht wurde.

Testfälle konnten nicht ausgeführt werden, da keine ausführbaren Versionen gefunden werden konnten. Nur Testfälle, die mit der neuesten Paketversion in Orchestrator veröffentlicht wurden, können ausgeführt werden.

Lösung

Dieses Problem tritt auf, wenn Testfälle in einem Testsatz nicht im neuesten Studio-Paket für den Orchestrator veröffentlicht werden. Sie erhalten möglicherweise den gleichen Fehler, wenn auf Orchestrator kein Prozess/Release für das Studio-Paket gefunden wurde.

Die automatisierte Ausführung konnte nicht gestartet werden, da in diesem Testsatz keine automatisierten Testfälle gefunden wurden.

Lösung

Sie benötigen mindestens einen automatisierten Testfall, um Execute Automatedverwenden zu können. Weitere Informationen finden Sie unter Bedingungen.

Beim Ausführen des Testsatzes ist ein Fehler aufgetreten. Versuchen Sie es erneut.

Lösung

Wenn die Ausführung des Testsatzes aus einem anderen als den oben genannten Gründen fehlschlägt, erhalten Sie Hilfe von den UiPath Support Services.