Berichterstellung mit Insights

Voraussetzungen

Hinweis:

Feature availability depends on the cloud platform you use. For details, refer to the Test Manager feature availability page.

Führen Sie die folgenden Schritte aus, um die Berichterstellung mit Insights zu aktivieren:

1. Enable the Insights service on the same tenant as your Test Manager instance. You need an Automation Cloud Organization Administrator role to enable a service.
2. From Test Manager, activate the Enable reporting with Insights tenant-level setting. You need a Test Manager Administrator tenant role to enable the integration with Insights. For more information about activating the setting, visit Tenant level settings.

Überblick

Once you enable the Insights integration in your Test Manager tenant, you will be able to access analytics for all your testing projects within that tenant. Insights retrieves data from Test Manager, based on a specific data model, and presents it through the Test Manager Execution Report predefined dashboard. This dashboard provides an overview of all your test executions within your tenant.

Figure 1. Test Manager Execution Report dashboard

Hinweis:

When you enable reporting with Insights, data from all Test Manager projects are uploaded to Insights. Therefore, all users with access to Insights will be able to generate reports on those projects, independent from their permissions in Test Manager.

Datenmodell

Insights uses test case logs from Test Manager to generate the customizable dashboards. For more details on the data model used by Insights to generate the dashboards, check the Test Manager data model section.

Hinweis:

In the Test Manager data model, test case logs contain two types of results: technical and functional. Usually these results are the same, unless a technical error appears during execution. Technical errors can include infrastructure disruptions, automation errors, or other non-functional triggers. In any of these scenarios, the technical results will be label the test as failed. Functional results are meant to only reflect the outcome of business verifications. Therefore they indicate no-result in case of errors because of the lack of a reliable outcome.

Erstellen von Insights-Dashboards basierend auf benutzerdefinierten Feldern

You can create Insights dashboards for Requirements and Test Sets, based on the custom fields associated with these data objects.

Sie können maximal 5 Selektoren für benutzerdefinierte Felder und 5 Dimensionen arbeiten.

1. Melden Sie sich bei Ihrer Plattform an und navigieren Sie zu Insights.
2. Go to Dashboards and add a dashboard.
3. Open the dashboard and select Edit Dashboard.
4. Hover the toolbar and select Add.

Figure 2. Add Insights dashboard

5. Select Visualization.

6. Under Test Manager, select the data object for which you want to create a dashboard. For example, let’s select Requirements.

7. Expand the data object category. For our example, expand Requirements. Note that you can have a maximum of 5 custom-field selectors (listed as Custom Field Selector 1 and so on, under Filter-Only Fields) and 5 dimensions (listed as Custom Field 1 and so on, under Dimensions). There is a 1:1 correspondence between the 5 custom-field selectors and the 5 custom-field dimensions. For example, Custom Field Selector 1 corresponds to Custom Field 1.

8. From Filter-Only Fields, select one or more custom-field selectors.

Figure 3. Custom field selection

9. Erweitern Sie die Dropdownliste, um alle benutzerdefinierten Felder anzuzeigen, die im Mandanten für Ihr Datenobjekt verfügbar sind. Das folgende Beispiel zeigt die benutzerdefinierten Felder, die im Beispielmandanten für Anforderungen verfügbar sind.

Figure 4. Custom field values

10. Wählen Sie die benutzerdefinierten Feldwerte für Ihre benutzerdefinierten Feldselektoren aus.

11. From Dimensions, select the custom fields. For example, select Custom Field 1, Custom Field 2, and Custom Field 3.

12. From Custom Field Filters, select the values you need. For example, select Name and Project Name.

13. From Measures, select the values you need. For this example, select Total Test Case Count.

14. Die von Ihnen ausgewählten Werte werden auf der rechten Seite im Arbeitsbereich-Editor angezeigt.

Figure 5. Measures

![Measures](https://dev-assets.cms.uipath.com/assets/images/test-manager/test-manager-measures-653087-6306c56b-5c59c123.webp)

15. From the upper, right-hand side of the workspace, select Run.

Figure 6. Run dashboard

![Run dashboard](https://dev-assets.cms.uipath.com/assets/images/test-manager/test-manager-run-dashboard-653091-74e46b49-8fe99c26.webp)

16. Wait for the data to load. The data can be visualized in multiple formats: table, graphs, or charts.

17. (Optional) Sortieren Sie Ihre Daten nach Spalten. Sortieren Sie Ihre Daten zum Beispiel nach Priorität.

18. From the upper, right-hand side of the workspace editor, select Save.

19. Wählen Sie das Bleistiftsymbol aus oder klicken Sie innerhalb des Tabellennamens, um Ihrem Dashboard einen offiziellen Namen zu geben. In unserem Beispiel haben wir das Dashboard „Benutzerdefiniertes Feld für Anforderung“ benannt.

20. Passen Sie die Größe der Tabelle durch Ziehen der Kanten an.

21. Fügen Sie im Symbolleistenmenü einen Filter für Ihr Dashboard hinzu.

22. Select Filters > Add Filter.

23. Add filters for your data object, in our case Requirements. Expand the data object (Requirements), expand Custom Field Filters and pick a selector (for example, Custom Field Filter Selector 1).

Figure 7. Filters

![Filters](https://dev-assets.cms.uipath.com/assets/images/test-manager/test-manager-filters-653095-3d3a61ba-60fffb1e.webp)

24. In the Add Filter dialog, continue configuring your filter (title, control, default value) and then select Add. For this example, we chose a radio button.

Figure 8. Add filter

![Add filter](https://dev-assets.cms.uipath.com/assets/images/test-manager/test-manager-add-filter-653099-6beda869-60318870.webp)

25. Expand the data object (Requirements) again and pick the selector value. For this example, we selected Custom Field Filters > Custom Field Filter 1.

Figure 9. Custom field filter

![Custom field filter](https://dev-assets.cms.uipath.com/assets/images/test-manager/test-manager-custom-field-filter-653103-57bc0bd2-800a4b95.webp)

26. In the Add Filter dialog, continue the configuration (title, control, filter options) and select Add. For our example, we chose Advanced from the Control field, and is any value from the Configure Default Value field.

Figure 10. Filter configuration

![Filter configuration](https://dev-assets.cms.uipath.com/assets/images/test-manager/test-manager-filter-configuration-653107-b916cb70-11857aba.webp)

27. In your dashboard, check the filter you added. For this example, we added Custom Field Filter Selector 1 and Custom Field Filter 1. Below the first filter, expand the is menu, select a value (Priority), and select Apply. Below the second filter, expand the is any value menu, select an operator and a value (contains High or Medium), and select Apply.

Figure 11. Filter values

![Filter values](https://dev-assets.cms.uipath.com/assets/images/test-manager/test-manager-filter-values-653111-423324f9-706a46b2.webp)

28. Select the Refresh button from the upper, right-hand corner of the workspace editor.

Test Manager-Datenmodell

Begriffe und Konzepte

Die Struktur des Test Manager-Datenmodells basiert auf den folgenden Konzepten:

Konzept	Beschreibung
Erkunden	Der Ausgangspunkt für die Erkundung. Die Daten werden über Analysefenster angezeigt, die als allgemeine Entität entsprechend den darin enthaltenen Felder betrachtet werden können.
Ansicht	Eine Ansicht stellt eine Tabelle mit Daten dar, unabhängig davon, ob diese Tabelle in Ihrer Datenbank enthalten ist oder mit der abgeleiteten Tabellenfunktion von Looker erstellt wurde. In jeder Ansicht befinden sich Felddefinitionen, von denen jede normalerweise einer Spalte in der zugrunde liegenden Tabelle oder einer Berechnung in Looker entspricht.
Dimension	Als Teil einer Ansicht innerhalb von Explore ist die Dimension ein gruppierbares Feld und kann zum Filtern von Abfrageergebnissen verwendet werden. Dies kann einer der folgenden sein: Ein Attribut, das eine direkte Zuordnung zu einer Spalte in einer zugrunde liegenden Tabelle hat. Ein Fakt oder ein numerischer Wert. Ein abgeleiteter Wert, der basierend auf den Werten anderer Felder in einer einzelnen Zeile berechnet wird.
Messung	Als Teil einer Ansicht innerhalb von Explore deklariert der Measure-Parameter eine neue Kennzahl (Aggregation) und gibt einen Namen für diese Kennzahl an. Examples of measures types: integer , string .

Dimensionen und Messungen

Feature availability depends on the cloud platform you use. For details, refer to the Test Manager feature availability page.

Hinweis:

The Requirements, Test sets, and Test executions dimensions and measures are available in Test Manager only when delivered via Test Cloud.

Testfallprotokolle

In den folgenden Tabellen werden die verfügbaren Dimensionen und Messungen für Testfallprotokolle beschrieben.

Table 1. Test Case Logs dimensions

Dimension	Typ	Beschreibung
E-Mail-Adresse des Beauftragten	string	Die E-Mail-Adresse des Benutzers, dem ein Testfall zugewiesen wurde.
Name des Automatisierungsprojekts	string	Der Name der Automatisierung, die mit dem Testfall verknüpft ist.
Fälligkeitsdatum	Datum	Das Datum, an dem die Ausführung eines manuellen Testfalls geplant war.
Ausführungsstart	Datum	Das Datum, an dem die Testausführung gestartet wurde.
Ausgeführt von	string	Der Benutzername oder Robotername, der den Test ausgeführt hat.
Ausführung beendet	Datum	Das Datum, an dem die Testausführung beendet wurde.
Ausführungstyp	string	Der Typ der Ausführung: Automatisiert für automatisierte Tests. Manuell für manuelle Tests. None for test cases that are not executed and are in the Pending state.
Name der Hostmaschine	string	Der Name des Computers.
Projektname	string	Der Name des Test Manager-Projekts.
Projektpräfix	string	Das Präfix des Test Manager-Projekts.
Meldedatum	Datum	Das Datum, an dem der Test ausgeführt wurde. Dies ist ein Datum ohne Uhrzeit und auch ohne Zeitzone.
Ergebnis	string	Das Testfallergebnis: Bestanden, Fehlgeschlagen oder Keines.
Robotername	string	Der Name des Roboters, der den Test ausgeführt hat.
Name der Testausführung	string	Der Name der Testausführung.

Table 2. Test Case Logs measures

Messungen	Typ	Beschreibung
Gesamtanzahl	Integer	Die Gesamtanzahl der Testfallprotokolle.
Anzahl bestanden	string	Die Anzahl der bestandenen Testfallprotokolle.
Anzahl fehlgeschlagen (technisch)	Integer	Technical results indicate results as failed when an exception occurs during execution.
Anzahl ohne Ergebnis (technisch)	Integer	Technical results indicate no results when an exception occurs during execution.
DurationInSeconds	Integer	Gesamtlaufzeit in Sekunden.

Anforderungen

In den folgenden Tabellen werden die verfügbaren Dimensionen und Messungen für Anforderungen beschrieben.

Table 3. Requirement dimensions

Dimension	Typ	Beschreibung
Projektname	string	Eine Kombination aus dem Projektnamen und dem Projektpräfix sollte ihn eindeutig machen und die Lesbarkeit erhöhen.
Name	string	Eine Kombination aus dem Anforderungsschlüssel und seinem Namen, um ihn eindeutig zu machen und die Lesbarkeit zu erhöhen.

Table 4. Requirement measures

Messung	Typ	Beschreibung
Gesamtanzahl der Testfälle	Integer	Die Anzahl der Testfälle, die einer Anforderung zugewiesen sind.
Anzahl der automatisierten Testfälle	Integer	Die Anzahl der automatisierten Testfälle, die einer Anforderung zugewiesen sind.
Anzahl der manuellen Testfälle	Integer	Die Anzahl der manuellen Testfälle, die einer Anforderung zugewiesen sind.
Anzahl der bestandenen Testfälle	Integer	Die Anzahl der Testfälle, die einer Anforderung zugewiesen sind und im letzten Testlauf bestanden wurden.
Anzahl der fehlgeschlagenen Testfälle	Integer	Die Anzahl der Testfälle, die einer Anforderung zugewiesen sind und im letzten Testlauf fehlgeschlagen sind.
Keine Testfallanzahl	Integer	Die Anzahl der Testfälle, die einer Anforderung zugewiesen sind, ohne Ergebnis im letzten Testlauf.
Gesamtanzahl der Anforderungen	Integer	Die Gesamtzahl der Anforderungen.

Testsätze

In den folgenden Tabellen werden die verfügbaren Dimensionen und Messungen für Testsätze beschrieben.

Hinweis:

For assigned test cases, the test set view contains information about static test assignments.

Table 5. Test set dimensions

Dimension	Typ	Beschreibung
Projektname	string	Eine Kombination aus dem Projektnamen und dem Projektpräfix sollte ihn eindeutig machen und die Lesbarkeit erhöhen.
Name	string	Eine Kombination aus dem Projektnamen und dem Projektpräfix sollte ihn eindeutig machen und die Lesbarkeit erhöhen.
Robotername	string	Der Name des Roboters, der den Testsatz ausgeführt hat.
Quelle	string	Die Quelle des Testsatzes: Orchestrator oder Test Manager.

Table 6. Test set measures

Messung	Typ	Beschreibung
Gesamtanzahl der Testsätze	Integer	Die Anzahl der Testsätze.
Anzahl der automatisierten Testfälle	string	Die Anzahl der automatisierten Testfälle im Testsatz.
Anzahl der manuellen Testfälle	Integer	Anzahl der manuellen Testfälle im Testsatz.

Testausführung

In den folgenden Tabellen werden die verfügbaren Dimensionen und Messungen für Testausführungen beschrieben.

Table 7. Test executions dimensions

Dimension	Typ	Beschreibung
Projektname	string	Eine Kombination aus Projektpräfix und Name, um sie eindeutig zu machen und die Lesbarkeit zu erhöhen.
Name	string	Eine Kombination aus Ausführungs-ID und Name, um sie eindeutig zu machen und die Lesbarkeit zu erhöhen.
Testsatzname	string	Eine Kombination aus Testsatzschlüssel und -name, um ihn eindeutig zu machen und die Lesbarkeit zu erhöhen.
Ausführungstyp	string	Der Ausführungstyp: Manuell, Automatisiert, Keine oder Gemischt.
Quelle	string	Die Quelle der Ausführung: TestManager, Orchestrator oder Studio.

Table 8. Test execution measures

Messung	Typ
Gesamtanzahl der Testausführungen	Integer
Anzahl der manuellen Ausführungstypen	Integer
Anzahl der automatisierten Ausführungstypen	Integer
Anzahl der gemischten Ausführungstypen	Integer
Dauer der Testausführung in Sekunden	Integer