Durchführen von Leistungsszenarien

Führen Sie ein Leistungsszenario aus, indem Sie zuerst einen Schreibtischtest durchführen, um die Stabilitäts- und Ressourcenanforderungen zu validieren, und dann eine vollständige Ausführung starten, um Last, Antwortzeiten und Fehlerquoten für alle Ihre konfigurierten virtuellen Benutzer zu messen.

1. Melden Sie sich beim Test Manager an.

2. Öffnen Sie ein Projekt.

3. Führen Sie einen Schreibtischtest durch. Öffnen Sie ein Leistungsszenario und wählen Sie Schreibtischtest aus.

   Tipp:

   Jede Lastgruppe wird mit einem einzelnen Roboter im Schreibtischtest ausgeführt, um die Automatisierungsstabilität zu validieren und Fehlkonfigurationen der Infrastruktur zu erkennen. Erweitern Sie nach dem Start des Schreibtischtests den Bereich Anwendungsprotokolle auf der rechten Seite, um nach nicht unterstützten Funktionen zu suchen, die von der Workflow-Analyse erkannt wurden. Überprüfen Sie das Aktivitätsprotokoll und die Workflowdateien, um Probleme zu erkennen und zu beheben, bevor Sie eine vollständige Ausführung durchführen. Der Schreibtischtest berechnet auch die erforderlichen Ressourcen vor der vollständigen Ausführung.

4. Sehen Sie sich das Live-Streaming während des Schreibtischtests an. Während des Schreibtischtests können Sie die Ausführung in Echtzeit beobachten. Identifizieren Sie unter Testgruppen eine Gruppe und wählen Sie das zugehörige Kamerasymbol aus, um das Livestreaming anzuzeigen.

   Hinweis:

   Livestreaming ist nur während Schreibtischtests verfügbar.

5. Führen Sie eine vollständige Ausführung aus. Öffnen Sie ein Leistungsszenario, für das Sie bereits einen Schreibtischtest durchgeführt haben. Wählen Sie Vollständige Ausführung aus. Der Ausführungsbildschirm. wird automatisch geöffnet.

6. Überwachen Sie das Dashboard in Echtzeit und überprüfen Sie den Ausführungsstatus. Die Fortschrittsleiste zeigt vier sequenzielle Phasen an.

   

   1. Laden der Testkonfiguration – Das System validiert die Szenarioeinrichtung und lädt die Konfigurationsdetails (Testfälle, Lastgruppen, Schwellenwerte und Datenquellen).
   2. Bereitstellungsressourcen – Die erforderlichen Ausführungsressourcen werden zugewiesen.
      • Für Cloud Robots bedeutet das das Bereitstellen serverloser Roboter und den Verbrauch von Platform Units.
      • Für lokale Roboter bedeutet dies, dass die richtigen Maschinen und Runtimes verfügbar sind.
   3. Vorbereiten virtueller Benutzer – Virtuelle Benutzer werden basierend auf den definierten Lastgruppeneinstellungen initialisiert, darunter das Verbinden von Robotern, das Zuweisen von Testfällen und das Vorbereiten der Ausführungsumgebung.
   4. Vollständige Ausführung – Der eigentliche Leistungstest wird gemäß dem konfigurierten Lastprofil ausgeführt (Hochfahren, Spitze, Herunterfahren). Die Echtzeitüberwachung von Metriken (Antwortzeiten, Fehlerquoten, Infrastrukturnutzung) ist ab dieser Phase verfügbar.

7. Lesen Sie die Ausführungsübersicht. Das Dashboard zeigt die Zusammenfassung einer Leistungstestausführung.

   

   • Lastgruppen: Aktive Lastgruppen, die derzeit parallel ausgeführt werden.
   • Virtuelle Benutzer: Derzeit aktive virtuelle Benutzer für das gesamte Szenario.
   • Fehler: Während der Ausführung sind bisher Fehler aufgetreten (HTTP, Automatisierungsfehler) für alle Gruppen.
   • Durchschnittliche Antwortzeit: Durchschnittliche und maximal erkannte Antwortzeit für alle Gruppen.
   • Diagramm: Laden Sie das Profil mit einer visuellen Darstellung des Fortschritts.

8. Lesen Sie die Metriken. Das Histogramm stellt die gesamte durchschnittliche Reaktionszeit für die aktuell ausgewählte Lastgruppe dar. Sie können den hervorgehobenen Balken in seiner Größe ändern und verschieben, um ihn in einen bestimmten Zeitbereich zu vergrößern. Mehrere Diagramme werden ebenfalls bereitgestellt.

   

   • Der Diagrammabschnitt Lastprofil zeigt, wie viele virtuelle Benutzer zu einem bestimmten Zeitpunkt aktiv waren. Dies spiegelt die konfigurierten Hochfahren-, Spitzen- und Herunterfahren-Phasen wider.
   • Der Diagrammabschnitt HTTP-Antwortzeit (ms) zeigt die durchschnittliche Antwortzeit von HTTP Anforderungen im ausgewählten Zeitraum an. Vergleichen Sie diese mit den Schwellenwerten (z. B. 1.000 ms), um zu sehen, wo die Leistung nachlassen.
   • Der Diagrammabschnitt „HTTP-Fehler“ zeigt den Prozentsatz von Fehlern der Stufe HTTPan (z. B. 404, 503). Dies hilft bei der Identifizierung, ob Server- oder Netzwerkprobleme die Ursache von Instabilität sind.
   • Der Diagrammabschnitt Automatisierungsschrittdauer (ms) misst, wie lange einzelne Automatisierungsschritte zur Ausführung dauern. Spitzen können auf Ineffizienzen oder Probleme im Automatisierungsdesign hinweisen.
   • Der Diagrammabschnitt Automatisierungsfehler (%) zeigt den Prozentsatz der Fehler auf Automatisierungsebene (z. B. fehlgeschlagene Selektoren, Ausnahmen). Dies hilft, Systemfehler von Automatisierungsproblemen zu unterscheiden.
   • Der Diagrammabschnitt Infrastruktur – Ausführen der Roboter-CPU (%) überwacht die CPU-Auslastung der Roboter, die die Last ausführen. Eine hohe oder kontinuierliche CPU-Auslastung kann auf einen Ressourcenengpass hinweisen.
   • Der Diagrammabschnitt Infrastruktur – Arbeitsspeicher der ausgeführten Roboter (%) verfolgt den Speicherverbrauch der ausgeführten Roboter. Dies ist nützlich, um Speicherverluste oder eine übermäßige Nutzung im Laufe der Zeit zu erkennen.
   • Verwenden Sie Perzentilmetriken wie P50, P90 oder P95, um Ihnen zu helfen, die Verteilung der Reaktionszeiten zu verstehen und Ausreißer zu identifizieren, die sich auf die Benutzererfahrung auswirken können. Diese sind für Metriken wie HTTP-Antwortzeit, HTTP-Fehler, Automatisierungsschrittdauer und Automatisierungsfehler verfügbar.

9. Überwachen Sie Probleme während der Ausführung. Überprüfen Sie das Anwendungsprotokoll und die Schweregrade rechts neben dem Ausführungsbildschirm. Für API-Leistungtests können Sie den Ausführungsfortschritt und die Ergebnisse im Diagrammformat und im Metrikformat einsehen. Die folgenden Informationen werden angezeigt: API-Stufen, Durchschnitt, Minimum, Maximum.

   

   • Info – Allgemeine Informationen, wie Ressourcenzuweisung
   • Warnung – Schwellenwertüberschreitungen oder potenzielle Risikobedingungen
   • Fehler – Automatisierungs- oder HTTP -Fehler (z. B. Anforderungs-Timeouts, Selektorfehler)
   • Schwerwiegend (Fatal) – Schwerwiegende Ausführungsfehler, die verhindern, dass der Test fortgesetzt wird

Ergebnis

Das Leistungsszenario schließt seinen Schreibtischtest oder die vollständige Ausführung ab. Im Ergebnis-Dashboard werden Lastprofile, Reaktionszeiten, Fehlerquoten und Infrastrukturmetriken für jede Lastgruppe angezeigt.