- Démarrage
- Gestion de projet
- Travailler avec l’analyse de l’impact des modifications
- Créer des scénarios de test
- Clonage des cas de test
- Exporter des cas de test
- Lier des cas de test à Test Manager dans Studio
- Delete test cases
- Activation de la gouvernance au niveau du projet
- Désactivation de la gouvernance au niveau du projet
- Activation de la gouvernance au niveau des cas de test
- Désactivation de la gouvernance au niveau du cas de test
- Activer ou désactiver la gouvernance en masse pour les cas de test
- Appliquer l’ordre de signature pour les cas de test régis
- Gérer les approbateurs pour les cas de test régis
- Gérer les cas de test régis à l’état En cours
- Gérer les cas de test régis dans l'état En révision
- Gérer les objets régis à l'état Signé
- Gérer les commentaires pour les cas de test régis
- Afficher les informations de gouvernance pour les journaux de cas de test
- Gérer les approbateurs pour les journaux de cas de test régis
- Gérer les journaux de cas de test régis dans l’état En cours
- Gérer les journaux de cas de test régis dans l’état En révision
- Gérer les journaux de cas de test régis dans l’état Signé
- Gérer les commentaires pour les journaux de cas de test régis
- Activer la gouvernance au niveau du journal de cas de test
- Désactivation de la gouvernance au niveau du journal de cas de test
- Afficher et rechercher des cas de test
- Exécuter des cas de test sans ensemble de tests
- Exécuter des tests mixtes
- Créer des exécutions en attente
- Réexécution des exécutions de test
- Résoudre les problèmes des exécutions automatisées
- FAQ - Feature parity - Test Manager vs Orchestrator (removed)
- Analyser les résultats de test
- États des résultats de test Playwright
- Supprimer les résultats de cas de test
- Synchronisation des défauts
- Créer des défauts à partir des résultats
- Résultats de test automatisés
- Remplacer les résultats de test
- Naviguer et rechercher des résultats de test
- Examen des résultats du cas de test
- Affichage de la couverture des activités
- Opérations et utilitaires de projet
- Paramètres de Test Manager
- Paramètres au niveau du locataire
- Paramètres généraux du projet
- Events
- S'abonner aux événements
- S'abonner à tous les événements
- Se désabonner des événements
- Se désabonner de tous les événements
- Se désabonner de la page des paramètres des notifications
- Affichage des notifications
- Filtrage des notifications
- Afficher les notifications par e-mail
- Activation des notifications par e-mail pour les serveurs SMTP
- Affichage uniquement des notifications non lues
- Marquer toutes les notifications comme lues
- Effacer toutes les notifications
- Suppression de notifications
- Chiffrement des clés gérées par le client
- Journaux d’audit
- Intégration de l'outil de gestion du cycle de vie des applications (ALM)
- Intégration de l'outil de gestion du cycle de vie des applications (ALM)
- Connecté à Test Manager
- Test Manager - Connecteur Integration Service
- Plages d'adresses IP sortantes pour les connecteurs
- Utilisation de SAP Cloud ALM et de Test Manager
- Étape 1: intégration de SAP Cloud ALM à Test Manager
- Étape 2: Créer des cas de test automatisés dans SAP Cloud ALM
- Étape 3: Créer des cas de test automatisés dans Test Manager
- Étape 4: synchronisation des cas de test de Test Manager vers SAP Cloud ALM
- Étape 5: attribution d'automatisations de test à des cas de test
- Étape 6: exécuter des cas de test
- Meilleures pratiques d'automatisation de test SAP
- Résolution des problèmes de l'intégration Jira
- Intégration de l'API
- Agents de codage pour les tests
- Résolution des problèmes
Analyser les résultats des performances
Tableau de bord des résultats des tests de performances avec le statut du groupe, la conformité SLO, les erreurs HTTP et d'automatisation, les seuils de temps de réponse et les métriques d'utilisation de l'infrastructure.
Le tableau de bord fournit plusieurs graphiques et indicateurs de statut qui vous aident à déterminer si votre application et votre infrastructure ont rempli les niveaux de performances attendus.
- Le graphique Utilisateurs affiche le nombre d'utilisateurs virtuels actifs au fil du temps et superposition de mesures clés supplémentaires telles que les erreurs d'automatisation, les temps de réponse et les erreurs
HTTP. Cela vous permet d'identifier rapidement les corrélations, par exemple, si une charge plus élevée correspond à une augmentation des erreurs ou à un temps de réponse plus lent. - Graphique d'infrastructure: affiche la consommation de processeur et de mémoire des robots exécutant la charge (génératifs de charge sans serveur ou machines locales). La surveillance de ces mesures permet de garantir que tous les problèmes de performances sont causé par la pression du système, plutôt que par une surcharge de l'infrastructure du robot.
- Cartes de groupe : chaque carte de groupe fournit un aperçu de haut niveau de l'état d'exécution d'un groupe de charge et de ses mesures clés.
- Nom du groupe et nom du cas de test. Le nom du groupe ne peut pas être modifié.
- Statut (aucun résultat, Réussi ou Échec). Le statut est déterminé automatiquement en fonction de la conformité au seuil, mais il peut également être ajusté manuellement. Cela permet aux propriétaires de test de remplacer les résultats s’ils estiment qu’un groupe doit être considéré comme ayant réussi malgré des violations mineures, ou marqué comme ayant échoué si les attentes critiques pour l’entreprise n’ont pas été respectées.
- Nombre d'utilisateurs virtuels exécutés. Cette mesure affiche une barre complète une fois qu’elle est entièrement terminée.
- Taux d'erreur (
HTTPet erreurs d'automatisation) - Délais de réponse moyens et maximum
Pour afficher les erreurs HTTP et les erreurs d'automatisation, consultez:
La vue du tableau de bord vous aide à évaluer rapidement si un groupe répond à ses objectifs de niveau de service définis. Pour une analyse plus approfondie, vous pouvez ouvrir la vue Métriques de groupe , qui fournit des graphiques détaillés sur les temps de réponse, les taux d’erreur, les durées d’étape et l’utilisation de l’infrastructure.
La vue détaillée fournit des informations détaillées sur des événements spécifiques qui se sont produits lors d’un test de performances.
- Sélectionner une période et un graphique: pour ouvrir la vue détaillée, vous devez d’abord sélectionner une plage de temps dans l’historique, puis choisir un graphique spécifique (par exemple, temps de réponse HTTP, erreurs). La vue détaillée affiche alors les entrées pertinentes pour la période sélectionnée.
- Paires requête/réponse HTTP: le tableau répertorie toutes les requêtes HTTP exécutées par le groupe de charge, y compris leur nom, leur type, leur heure de réponse et leur code de statut.
- Si les demandes renvoient des codes d'erreur (par exemple, 404, 500), elles sont marquées comme des erreurs.
- Si les demandes renvoient des codes valides (par exemple, 200), mais dépassent les seuils de temps de réponse, elles sont également signalées ici. Le nombre qui précède chaque entrée indique combien de fois le problème s'est produit.
- Erreurs d’automatisation: la même vue détaillée peut également être utilisée pour afficher les erreurs au niveau de l’automatisation telles que les échecs de sélecteur ou les exceptions d’activité. Ces derniers fournissent une visibilité sur les problèmes fonctionnels pouvant survenir en cas de charge.
En combinant les codes d’erreur, les violations de seuil et les journaux d’automatisation, la vue détaillée permet d’identifier la cause profonde des échecs de performances ou de fonctionnement dans un scénario de test.
Métriques d’étape pour les tests de performances de bureau
Pour les tests de performance automatisés sur un poste de travail, les résultats affichent des mesures pour chaque étape de l'automatisation, et pas seulement pour la durée globale des étapes. Ils identifient l'étape qui ralentit l'exécution et l'endroit où examiner dans l'application.
Le tableau des étapes indique les valeurs suivantes pour chaque étape:
- Average (Moyenne): durée moyenne de l'étape.
- Min: la durée la plus courte de l'étape.
- Max: la plus longue durée de l'étape.
Les activités parentes s'affichent avec les étapes qu'elles contiennent. La durée d'une activité parente inclut l'heure des étapes qu'elle contient.
Le tableau suit la plage de temps que vous sélectionnez pour l'exécution, de la même manière que le tableau des mesures pour les requêtes HTTP .
Journal des évènements du Robot
Les journaux du robot sont consultables et filtrables, par groupe de charge et par gravité, directement dans cet écran de résultats, aux côtés des journaux d'application. Auparavant, les journaux du robot nécessitaient le passage à Orchestrator.
Rapports de performances basés sur des personas
A persona-based report translates dashboard charts and SLO tables into a plain-language answer to "what do I do next?" Four views are available, one per audience:
- Gestionnaire du programme - Préparation à la publication : un verdict par groupe de charge (Ne pas publier ou Production prête) en fonction de la conformité SLO. Réponses : le produit est-il prêt à être mis en production ?
- Développeur - Vue du développeur : taux d'erreur et détails sur le temps de réponse par groupe, ainsi qu'un indice indicatif sur la cause profonde. Réponses : qu'est-ce qui ne fonctionne pas ?
- InfraOps - Vue de l'infrastructure : utilisation maximale du CPU et de la mémoire par groupe. Réponses : s'agit-il d'un problème d'infrastructure ?
- QA/Tester - Vue QA/Tester : quels groupes de charge nécessitent un nouveau test complet par rapport à ceux ne nécessitant aucun nouveau test après un correctif. Réponses : qu'est-ce qui doit être retesté ?
Generating persona-based reports requires the Performance Testing Model Context Protocol (MCP) server. For steps, refer to Link to the Performance Testing MCP server.
Rapports
Each performance scenario has a Reports tab listing every stored report, both single-run reports and comparison reports. From this tab, you can search, sort, rename, and delete individual reports. Generating stored reports, including comparison reports, requires the Performance Testing MCP server.
Les rapports de comparaison affichent une ligne par exécution superposée sur chaque graphique partagé, de sorte que vous pouvez aligner plusieurs exécutions et voir où une modification a fait une différence. Les graphiques partagés incluent :
- Délai de réponse
- Débit
- Taux d'erreur HTTP et d'automatisation
- Utilisateurs virtuels
- Processeur
- RAM
Toute métrique qu'une exécution n'a pas est supprimée de la ligne de cette exécution plutôt que de bloquer la comparaison.
Les rapports PDF s'ouvrent en ligne dans la visionneuse de l'application, comme les rapports HTML, afin que vous puissiez les examiner sans les télécharger d'abord.
Analyse des résultats de performances avec le chat Autopilot (agent)
Generating performance reports, and analyzing performance test executions using natural-language queries in Autopilot chat (agent), requires connecting the Performance Testing MCP server. The server is not connected by default. For setup steps and the full list of available tools, refer to About Autopilot chat (agent) - Link to the Performance Testing MCP server.
Résultat
Les résultats de l'exécution des performances s'affichent dans le tableau de bord avec des cartes de groupe, des graphiques et des répartitions des erreurs. La vue détaillée affiche les paires de requête-réponse HTTP et les erreurs d'automatisation pour la période sélectionnée, ce qui vous aide à identifier la cause profonde de tous les échecs.