- Erste Schritte
- Projektmanagement
- Dokumente
- Arbeiten mit der Analyse der Änderungsauswirkungen
- Erstellen von Testfällen
- Zuweisen von Testfällen zu Anforderungen
- Klonen von Testfällen
- Exportieren von Testfällen
- Verknüpfen von Testfällen in Studio mit dem Test Manager
- Delete test cases
- Manuelle Testfälle
- Importieren manueller Testfälle
- Dokumentieren von Testfällen mit Task Capture
- Parameter
- Aktivieren der Governance auf Projektebene
- Deaktivieren der Governance auf Projektebene
- Aktivieren der Governance auf Testfallebene
- Deaktivieren der Governance auf Testfallebene
- Verwalten von Genehmigern für strukturierte Testfälle
- Verwalten von gesteuerten Testfällen im Status In Arbeit
- Verwalten von geregelten Testfällen im Status „Wird überprüft“.
- Verwalten von gesteuerten Objekten im Status „Signiert“.
- Verwalten von Kommentaren für gesteuerte Testfälle
- Anwenden von Filtern und Ansichten
- Importieren von Orchestrator-Testsätzen
- Creating test sets
- Hinzufügen von Testfällen zu einem Testsatz
- Zuweisen von Standardbenutzern in der Testsatzausführung
- Aktivieren der Aktivitätsabdeckung
- Aktivieren von Healing Agent
- Konfigurieren von Testsätzen für bestimmte Ausführungsordner und Roboter
- Überschreiben von Parametern
- Klonen von Testsätzen
- Exportieren von Testsätzen
- Anwenden von Filtern und Ansichten
- FAQ – Funktion – Test Manager vs Orchestrator
- Ausführen von manuellen Tests
- Ausführen automatisierter Tests
- Ausführen von Testfällen ohne Testsatz
- Ausführen gemischter Tests
- Erstellen von ausstehenden Ausführungen
- Erzwingen einer Ausführungsreihenfolge
- Erneutes Ausführen von Testausführungen
- Planen von Ausführungen
- Fehlerbehebung bei automatisierten Ausführungen
- Zugänglichkeitstests für Test Cloud
- Suche mit Autopilot
- Projektvorgänge und Dienstprogramme
- Test Manager-Einstellungen
- ALM Tool-Integration
- API-Integration
- Fehlersuche und ‑behebung
Test Manager-Benutzerhandbuch
Die Funktionsverfügbarkeit hängt von der Cloud-Plattform ab, die Sie verwenden. Weitere Informationen finden Sie auf der Seite zur Verfügbarkeit der Test Manager-Funktion.
Generieren manueller Testfälle für die Anforderung
Die Funktionsverfügbarkeit hängt von der Cloud-Plattform ab, die Sie verwenden. Weitere Informationen finden Sie auf der Seite zur Verfügbarkeit der Test Manager-Funktion.
Mit der Funktion Tests generieren können Sie manuelle Testfälle direkt aus Ihren Anforderungen erstellen, indem Sie generative KI verwenden. Das Tool, mit dem Sie Testfälle generieren können, heißt Autopilot. Mithilfe von Autopilot erstellt diese Funktion eine Liste manueller Testfälle, indem verschiedene Anforderungsdetails wie Name, Beschreibung, Anhänge, benutzerdefinierte Felder, Beschriftungen und Dokumente analysiert werden. Sie können dann Testfälle aus der ursprünglichen Liste erstellen oder spezifische Anweisungen zum Generieren von Testfällen bereitstellen, die genau auf Ihre Anforderungen zugeschnitten sind.
Voraussetzungen
- Um Tests für eine Anforderung zu generieren, muss Ihre Test Manager-Rolle über die folgenden Berechtigungen verfügen:
- Testfall – Erstellen
- Anforderung – Bearbeiten
- (Nur für Cloud Kommerziell) Wenn Sie RAG beim Generieren von Tests nutzen möchten, müssen Sie mit der Kontextgrundlage beginnen, zu der RAG gehört. Um mit Kontextgrundlage zu beginnen, besuchen Sie die entsprechende Seite mit den bewährten Methoden .
Nehmen wir das Beispiel des Testens einer Funktion zum Einreichen von Kreditanfragen in der UiBank-Anwendung. So würden Sie das Tool verwenden:
Schritte
- Öffnen Sie ein Projekt und navigieren Sie zu Anforderungen.
- Erstellen Sie eine Anforderung namens Kreditanfrage einreichen und geben Sie eine detaillierte Beschreibung für den Ablauf und die Akzeptanzkriterien des Antrags ein. Beachten Sie die Beschreibung, die Sie für dieses Beispiel verwenden können:
Anforderungsbeispiel
In dieser Anforderung wird beschrieben, wie Personen einen Kredit in der UiBank-Banking-Anwendung von UiPath® beantragen können. Anwendungsablauf
- Der Antragsteller startet den Kreditantrag unter
https://uibank.uipath.com. - Der Antragsteller klickt auf die Schaltfläche „Products“ (Produkte) im Header-Menü.
- Der Antragsteller klickt auf die Schaltfläche „Loans“ (Kredite) im Dropdownmenü.
- Das System leitet zu
https://uibank.uipath.com/loansweiter. - Der Antragsteller klickt auf die Schaltfläche „Apply For a Loan“ (Kredit beantragen).
- Das System leitet zu
https://uibank.uipath.com/loans/applyweiter. - Der Antragsteller muss die folgenden Pflichtfelder ausfüllen:
- Email Address (E-Mail-Adresse): Dieses Feld erfordert eine E-Mail-Adresse in einem gültigen Format.
- Loan Amount (Kreditbetrag): Dieses Feld akzeptiert nur positive Ganzzahlen.
- Loan Term (Kreditlaufzeit): Dieses Feld bietet die Optionen „1“, „3“, „5“ und „10“ in Jahren.
- Jährliches Einkommen: Dieses Feld akzeptiert nur positive Integer-Werte.
- Alter: Dieses Feld akzeptiert nur positive Integer-Werte.
- Der Antragsteller klickt dann auf die Schaltfläche „Submit Loan Application“ (Kreditantrag einreichen).
- Der Antragsteller wird auf der nächsten Seite darüber informiert, ob der Kreditantrag genehmigt oder abgelehnt wurde.Annahmekriterien Für Antragsteller zwischen 18 und 65 Jahren und einen Kreditbetrag von weniger als 100.000 genehmigen wir den Kreditantrag mit:
- Congrats! Sie wurden für einen Kredit bei der UiBank genehmigt! Für Antragsteller unter 18 Jahren wird der Kreditantrag mit dieser Nachricht abgelehnt:
- „Leider wurde Ihnen zum aktuellen Zeitpunkt kein Kredit genehmigt.“Für Antragsteller zwischen 18 und 65 Jahren und einem Kreditbetrag von mehr als 100.000 lehnen wir den Kreditantrag ab mit:
- „ Leider wurde Ihnen derzeit kein Kredit genehmigt. Für Antragsteller, die nicht alle Pflichtfelder ausfüllen und dann auf die Schaltfläche „Kreditantrag einreichen“ klicken:
- Es wird keine Fehlermeldung angezeigt
- Es wird keine Aktion ausgeführt
- Der Antragsteller bleibt auf derselben Seite
- Wählen Sie Weitere Optionen für diese Anforderung und dann Abdeckung optimieren aus. Alternativ öffnen Sie die Anforderung und wählen Sie dann Abdeckung optimieren aus.
- Wählen Sie im Dialogfeld Abdeckung optimieren die Option Tests generieren aus. Das Fenster Zusätzlichen Kontext bereitstellen wird mit dem Fokus auf Dokumente hinzufügen geöffnet und Sie werden aufgefordert, Anhänge oder andere Dokumente anzugeben, die zum Generieren von Testfällen erforderlich sind. Die Anhänge sollten mit dem Prozess des Einreichens des Kreditantrags verbunden sein.
- Wählen Sie im Abschnitt Dokumente hinzufügen die Anhänge der Anforderung aus. Diese werden beim Generieren von Tests verwendet. Sie können auch selbst andere Dateien hochladen.
Abbildung 1. Der Abschnitt „Dokumente hinzufügen“ zum Generieren von Tests (nur für Cloud Kommerziell)
2. (Nur für Cloud kommerzielle) Wählen Sie im Abschnitt Nutzung von RAG des Fensters Zusätzlichen Kontext bereitstellen einen Index aus, der Ihre in Kontextgrundlage hochgeladenen Daten speichert. Der ausgewählte Index hilft Autopilot bei der Generierung genauerer Tests, indem er ihm Kontext zu den Anwendungen gibt, die Sie automatisieren möchten. Sie können RAG beispielsweise nutzen, wenn ein Anforderungsdokument unvollständige Informationen enthält oder auf zusätzliche Details in anderen Abschnitten verweist. In diesem Fall können Sie RAG nutzen, um diese Details aus indizierten Referenzen zu ziehen. ::note Weitere Informationen zu Best Practices für die Arbeit mit Kontextgrundlage finden Sie unter Best Practices. :: 1. Wählen Sie aus der Dropdownliste Ordner auswählen den Ordner aus, in dem Sie die Indizes speichern, die die gewünschten Informationen speichern, die Sie mit Autopilot teilen möchten. 2. Wählen Sie aus der Dropdownliste Index auswählen den spezifischen Index aus, auf den Autopilot verweisen soll. 3. Geben Sie für Anzahl der Ergebnisse die Anzahl der Tests ein, die Autopilot basierend auf den referenzierten Informationen generieren soll.
Abbildung 2. Der Abschnitt Nutzung von RAG zum Generieren von Tests
5. Wählen Sie Weiter aus und geben Sie zusätzliche Anweisungen an, die der Autopilot beim Generieren von Testfällen befolgen soll. Wählen Sie eine Eingabeaufforderung aus der Eingabeaufforderungsbibliothek aus oder geben Sie diese Anweisungen in das Fenster Zusätzliche Anleitung bereitstellen ein. Das sind einige der Anweisungen, die Autopilot befolgen kann:
- Sie können Autopilot die Anzahl der Testfälle anweisen, die Sie generieren möchten. Die maximale Anzahl von Testfällen ist 50.
- Sie können angeben, dass der Autopilot alle Benutzerschritte und Akzeptanzkriterien abdecken soll, die in der Anforderung des Kreditantrags beschrieben sind.
- Sie können Autopilot anweisen, Vorbedingungen zu generieren.
- Sie können Autopilot angeben, um für jeden Testschritt ein erwartetes Ergebnis zu generieren.
- Standardmäßig berücksichtigt Autopilot vorhandene Tests, die mit einer Anforderung verknüpft sind, um Duplikate von Tests zu verhindern. Sie können Autopilot jedoch anweisen, vorhandene Tests während der neuen Testgenerierung zu ignorieren. Sie können dies tun, indem Sie eine Anweisung bereitstellen wie: „Berücksichtigen Sie beim Generieren von Tests keine Tests, die mit dieser Anforderung verknüpft sind“. Abbildung 3. Das Fenster „Zusätzliche Anleitung bereitstellen“ zum Generieren von Tests
- Wählen Sie optional aus der Dropdownliste Modell das KI-Modell aus, das der Autopilot verwenden soll. Autopilot verwendet beim Generieren von Tests standardmäßig Claude 3.7 Sonnet, was auch das empfohlene Modell ist.
Hinweis:
Die in der Auswahlliste Modell verfügbaren Modelle hängen von der AI Trust Layer-Richtlinie ab, die auf Ihre Organisation und Ihren Mandanten angewendet wird. Wenn alle unterstützten Modelle aktiviert sind, wird Claude 3.7 Sonnet als empfohlene Option angezeigt. Wenn nur ein Modelltyp aktiviert ist (z. B. Azure OpenAI), wird nur das GPT 4o-Modell angezeigt und automatisch empfohlen.
- Wählen Sie Tests generieren aus, um den Prozess zu starten. Wenn die Generierung abgeschlossen ist, erhalten Sie die Benachrichtigung Testfallgenerierung abgeschlossen . Je nach Ihren Benachrichtigungseinstellungen können Sie die Benachrichtigung sowohl in der App als auch per E-Mail erhalten.
- Wählen Sie die Benachrichtigung Testgenerierung abgeschlossen aus, um die generierten Testfälle zu überprüfen.
- Erweitern Sie jeden Testfall im Bereich Tests generieren und überprüfen Sie die generierten Testfälle.
Abbildung 4. Die Vorschau der generierten Tests
2. Wenn Sie mit dem Inhalt zufrieden sind, wählen Sie Tests erstellen aus. Die ausgewählten Testfälle zeigen im Bereich Tests generieren ein Häkchen an, was angibt, dass sie erfolgreich erstellt wurden. Die generierten Testfälle sind auch mit der Anforderung verbunden, mit der sie generiert wurden. 8. Wenn Sie mit den generierten Testfällen nicht zufrieden sind, wählen Sie Erneut generieren aus und geben Sie zusätzliche Details zu Ihrem Anwendungsfall an.
- Hängen Sie weitere relevante Dokumente an, die Autopilot verwenden soll.
- Klicken Sie auf Weiter und geben Sie zusätzliche Details in das Textfeld Anweisungen angeben ein. Der Abschnitt mit den Best Practices für das Schreiben von Anweisungen am Ende dieser Seite enthält eine Anleitung zum Erstellen effektiver Prompts.
- Nachdem Sie die Schritte verfeinert haben, wählen Sie Erneut generieren aus.
- Klicken Sie auf die Benachrichtigung Testgenerierung abgeschlossen, um auf die neu generierten Testfälle zuzugreifen.
- Erweitern und überprüfen Sie jeden Testfall.
- Wählen Sie die Testfälle aus, mit denen Sie zufrieden sind, und wählen Sie dann Tests erstellen aus.
Unterstützte Dateitypen
Autopilot kann verschiedene Dateitypen verarbeiten. Je nach Dateityp kann Autopilot bestimmte Inhalte daraus verarbeiten. In der folgenden Liste sind die Dateitypen aufgeführt, die Sie Autopilot anbieten können, zusammen mit Details zum Inhaltstyp, den Autopilot von jedem Typ verarbeiten kann:
- Verarbeitet nur Textinhalt – Autopilot verarbeitet nur den Textinhalt aus diesen Dateitypen:
- TXT
- BPMN
- CSV
- Verarbeitet sowohl Text- als auch Bildinhalte – Autopilot verarbeitet sowohl den Text als auch die Bilder dieser Dateitypen:
- DOCX
- XLSX
- PNG
- JPG
Best Practices
Eine umfassende Liste mit Richtlinien und Beispielen, die Ihnen beim Verfassen effektiver Anweisungen helfen, finden Sie unter Best Practices zum Generieren von Tests aus Anforderungen .
Benutzerzugriffsverwaltung mit Autopilot for Testers
Mit der Governance-Richtlinie der AI Trust Layer können Sie die Nutzung von KI-gestützten Funktionen innerhalb Ihrer Organisation verwalten.Standardmäßig haben alle Mitglieder Zugriff auf diese Funktionen, Sie können aber diese Richtlinie verwenden, um den Zugriff nach Bedarf einzuschränken.Mit der Governance-Richtlinie der AI Trust Layer können Sie den Zugriff eines Benutzers oder einer Benutzerin auf bestimmte oder alle KI-gestützten Funktionen auf Benutzer-, Gruppen- oder Mandantenebene beschränken.Darüber hinaus können Sie entscheiden, auf welche KI-Produkte Benutzer zugreifen können. Sie können diese Governance-Richtlinie in Automation Ops erstellen, ändern und implementieren.
Wenn Sie eine AI Trust Layer-Governance-Richtlinie bereitstellen und dennoch die KI-gestützten Testfunktionen verwenden möchten, achten Sie darauf, dass Sie beim Funktionsumschalter der Richtlinie Ja für Aktivieren der Test Manager-Funktionen auswählen.
In den folgenden Ressourcen erfahren Sie, wie Sie eine Governance-Richtlinie für Ihre Organisation erstellen, konfigurieren und bereitstellen.
- Eine Governance-Richtlinie erstellen
- Einstellungen für AI Trust Layer-Richtlinien
- Bereitstellung von Governance-Richtlinien
Zugreifen auf die neuesten Ergebnisse der Testgenerierung
Greifen Sie auf Ihre zuletzt generierten Testfälle auf der Seite Anforderungen zu.
- Wechseln Sie zu Letzte Ergebnisse.
- Wählen Sie Generierte Testfälle aus.