Berichte

Understand the progress, detect problems at a glance, and review KPIs through reports.

Berichtstypen

Die folgenden Berichtstypen sind verfügbar:

• Default Test Manager dashboards provided by Insights.
• Dashboard-Berichte, die eine tägliche und wöchentliche Aufstellung der Testergebnisse bieten, einschließlich des Verhältnisses zwischen bestandenen und fehlgeschlagenen Tests, der Liste der ausgeführten Tests und der KPIs, wie z. B. der Gesamtabdeckung oder der offenen Fehler.

Reporting with Insights

Voraussetzungen

To enable reporting with Insights, follow these steps:

1. Enable the Insights service on the same tenant as your Test Manager instance.

   You need an Automation Cloud Organization Administrator role to enable a service.

2. From Test Manager, activate the Enable reporting with Insights tenant-level setting.

   You need a Test Manager Administrator tenant role to enable the integration with Insights.

   For more information about activating the setting, visit Tenant level settings.

Überblick

Once you enable the Insights integration in your Test Manager tenant, you will be able to access analytics for all your testing projects within that tenant. Insights retrieves data from Test Manager, based on a specific data model, and presents it through two predefined dashboards:

• Test Manager Execution Report – This dashboard provides an overview of all your test executions within your tenant.
• Test Manager Additional Examples – This dashboard provides an overview of all your testing projects within your tenant.

Abbildung 1. Dashboard für den Ausführungsbericht Test Manager

Note: When you enable reporting with Insights, data from all Test Manager projects are uploaded to Insights. Therefore, all users with access to Insights will be able to generate reports on those projects, independent from their permissions in Test Manager.

Datenmodell

Insights uses test case logs from Test Manager to generate the customizable dashboards. For more details on the data model used by Insights to generate the dashboards, check the Test Manager data model section.

Note: In the Test Manager data model, test case logs contain two types of results: technical and functional. Usually these results are the same, unless a technical error appears during execution. Technical errors can include infrastructure disruptions, automation errors, or other non-functional triggers. In any of these scenarios, the technical results will be label the test as failed. Functional results are meant to only reflect the outcome of business verifications. Therefore they indicate no-result in case of errors because of the lack of a reliable outcome.

Dashboard-Berichte Test Manager

Sie können die Berichte der einzelnen Projekte einzeln untersuchen. Um Dashboardberichte anzuzeigen, öffnen Sie den Test Manager und wählen Sie ein Projekt in der Liste aus, um die Seite Dashboard anzuzeigen.

Abschnittsnummer	Melden	Beschreibung
1	Ergebnisse	Balkendiagramm mit den Ergebnissen Ihrer Testausführungen. Um zwischen den täglichen und wöchentlichen Ansichten zu wechseln, klicken Sie auf den Fokusindikator oben rechts im Dashboard und wählen Sie in der Dropdownliste eine Option aus. Der Wochenbericht geht 14 Wochen zurück.
2	Indikator für aktuellen Tag/aktuelle Woche	Tages-/Wochen-Indikator der im Balkendiagramm angezeigten Ergebnisse. Dieser Abschnitt wird in der obigen Abbildung nicht erfasst.
3	KPIs	Die Option Offene Fehler ist nur für verbundene Projekte verfügbar. Zum Beispiel die Fehlerberichte aus dem Jira-Projekt, das mit dem Test Manager verbunden ist. Die Anzahl der Fehler, die mit der höchsten Priorität in Jira definiert wurden, werden im Abschnitt Kritisch angezeigt. Sie können auf den Hyperlink klicken, um den Jira-Filter zu öffnen. Wenn Sie eine Verbindung trennen, wird „Offene Fehler“ nicht mehr angezeigt. Gesamtabdeckung Der Prozentsatz der Anforderungen, die mindestens einen Testfall haben, bezogen auf die Gesamtzahl der Anforderungen. Automatisierungsrate Der Prozentsatz der Testfälle ohne definierte automatisierte/manuelle Schritte, sowie die automatisierten bzw. manuellen Testfälle.
4	Letzte Ergebnisse	Die neuesten Testausführungen, die zu Ihren Testergebnissen beigetragen haben, werden in einem Balkendiagramm angezeigt.

Anwendungsfallszenario

Um die Dashboard-Berichte zu nutzen, betrachten Sie das folgende Szenario:

Problem

Sie haben zum Beispiel eine große Anzahl von Fehlern, die bearbeitet werden müssen, sowie eine ebenso große Anzahl von manuellen Testfällen.

Lösung

Sie können einen Blick auf das Dashboard werfen, um die Anzahl der Defekte zu überprüfen. Klicken Sie dort auf den Abschnitt Kritisch im Bericht Offene Fehler, um den Filter in Jira zu öffnen. Der Bericht zur Automatisierungsrate gibt den Automatisierungsgrad Ihres Testprojekts an. Mit diesen Informationen können Sie damit beginnen, die Anzahl der manuellen Testfälle zu reduzieren. Die automatisierten Testfälle haben somit Vorrang, sodass Sie mehr Tester einsetzen können, um die hohe Anzahl von Fehlern zu bewältigen.