- Erste Schritte mit der Test Suite
- Studio
- Test Suite – Studio
- Überblick
- Testaktivitäten und APIs
- Orchestrator
- Testing Robots
- Test Manager
KI-gestützte Auswertung
Diese Funktion ist derzeit Teil eines Prüfungsprozesses und gilt erst nach Abschluss der Überprüfung als Teil der FedRAMP-Autorisierung. Hier finden Sie die vollständige Liste der Funktionen, die derzeit überprüft werden.
Auf dieser Seite werden Richtlinien für die Auswertung von Anforderungen im Test Manager aufgeführt.
Dieser Abschnitt enthält Beispiele für zusätzliche Anweisungen, die Sie dem AutopilotTM zur Verfügung stellen können.
Sehen Sie sich den folgenden Leitfaden an, den Sie dem Autopilot geben können, um die Anforderungen aus verschiedenen Perspektiven zu analysieren:
„Erstellen Sie die 10 besten Verbesserungsvorschläge aus verschiedenen Perspektiven:
- User Flow: Suchen Sie nach detaillierten Informationen über den Benutzerflow und die Anwendungslogik.
- Konsistenz: Untersuchen Sie auf logische Kohärenz und das Fehlen von Konflikten.
- Relevanz: Überprüfen Sie, ob die Anforderung die Bedürfnisse des Benutzers klar herausstellt.
- Begründung: Überprüfen Sie, ob darin erklärt wird, warum es notwendig ist und welches Problem damit gelöst wird.
- Klarheit: Überprüfen Sie die Anforderungsbeschreibung auf Genauigkeit und Klarheit.
- Kriterien: Überprüfen Sie auf messbare und erreichbare Akzeptanzkriterien.
- Vollständigkeit: Prüfen Sie auf Einbeziehung aller kritischen Funktionen.
- Voraussetzungen: Beachten Sie fehlende Voraussetzungen oder Bedingungen, die vor der Implementierung erforderlich sind.
- Sicherheit: Prüfen Sie, ob die Anforderung die Belange der Sicherheit und des Datenschutzes adäquat berücksichtigt.
- Compliance: Prüfen Sie, ob es möglicherweise Probleme mit der Einhaltung von Gesetzen und Vorschriften gibt.
- Ethik: Prüfen Sie, ob die Voraussetzungen ein faires und verantwortungsvolles Verhalten fördern.
- Terminologie: Stellen Sie sicher, dass eine klare, umfassende und allgemein verständliche Sprache verwendet wird.
- Leistung: Kontrollieren Sie, ob es klare Leistungskennzahlen und Benchmarks gibt.“
Sehen Sie sich den folgenden Leitfaden an, den Sie dem Autopilot für die Analyse von Anforderungen in Bezug auf sicherheitsbezogene Aspekte geben können.
„Erstellen Sie die 10 besten Verbesserungsvorschläge, die sich ausschließlich auf Sicherheitsaspekte beziehen:
- Zugriff: Überprüfen Sie, ob klar ist, wer unter welchen Bedingungen auf die Anwendung zugreifen kann.
- Schutz: Überprüfen Sie, ob Verschlüsselung, Anonymisierung und sichere Speichermaßnahmen definiert sind.
- Authentifizierung: Überprüfen Sie, ob Identitätsüberprüfung und Berechtigungssteuerelemente enthalten sind.
- Sicherheitslücken: Überprüfen Sie, ob Maßnahmen gegen bekannte Sicherheitslücken getroffen werden.
- Übertragung: Überprüfen Sie, ob verschlüsselte Datenübertragungen vorgeschrieben sind.
- Protokollierung: Überprüfen Sie, ob detaillierte Protokollierungs- und Überwachungsbestimmungen enthalten sind.
- Compliance: Überprüfen Sie, ob die Einhaltung relevanter Sicherheitsstandards gewährleistet ist.
- Fehler: Prüfen Sie, ob sichere Verfahren zur Fehlerbehandlung angegeben sind.
- Antwort: Überprüfen Sie, ob Protokolle für die Reaktion auf Sicherheitsvorfälle vorhanden sind.“
Sehen Sie sich den folgenden Leitfaden an, den Sie dem Autopilot für die Analyse von Anforderungen in Bezug auf leistungsbezogene Aspekte geben können.
„Generieren Sie die 10 wichtigsten Verbesserungsvorschläge, die sich ausschließlich auf Leistungsaspekte konzentrieren:
- Zeit: Überprüfen Sie, ob bestimmte Reaktionszeiten unter verschiedenen Lastbedingungen detailliert angegeben sind.
- Durchsatz: Überprüfen Sie, ob die erwarteten Durchsatzraten klar angegeben sind.
- Skalierbarkeit: Prüfen Sie, ob die Anforderung die Skalierbarkeit bei steigender Belastung berücksichtigt.
- Ressourcennutzung: Prüfen Sie, ob Grenzen für die CPU-, Arbeitsspeicher- und Speichernutzung definiert sind.
- Effizienz: Überprüfen Sie, ob die Anforderung eine effiziente Nutzung von Ressourcen fördern.
- Lastbehandlung: Überprüfen Sie, ob Strategien für den Umgang mit Peak-Lastbedingungen enthalten sind.
- Gleichzeitigkeit: Überprüfen Sie, ob Verhaltensweisen für Concurrent User-Szenarien angegeben sind.
- Latenz: Überprüfen Sie, ob die maximal akzeptablen Latenzzahlen klar angegeben sind.
- Stabilität: Prüfen Sie, ob die Stabilität unter Belastungsbedingungen berücksichtigt wird.
- Kapazität: Prüfen Sie, ob maximale Systemkapazitätsgrenzen angegeben sind.“
In diesem Abschnitt sind verschiedene Arten von unterstützenden Dokumenten aufgeführt, die Sie dem AutopilotTM zur Verfügung stellen können. Betrachten Sie diese Dokumente als zusätzliche Informationen, die die Beschreibung einer Anforderung im Test Manager verbessern. Da diese Dokumente die Anforderungsbeschreibung ergänzen, bietet Autopilot auch Vorschläge zur Verbesserung ihrer Qualität. Im Wesentlichen wird die Definition Ihrer Anforderung durch die Anforderungsbeschreibung und alle zugehörigen Begleitdokumente bestimmt.
Erwägen Sie die Bereitstellung von Sicherheitsrichtlinien, Richtliniendokumenten oder Ergebnissen von Sicherheitsprüfungen. Der Autopilot überprüft diese Dokumente auf eventuelle Unstimmigkeiten oder Diskrepanzen innerhalb dieser Dokumente oder zwischen diesen Dokumenten und den in der Anforderungsbeschreibung dargestellten Sicherheitsaspekten. So wird sichergestellt, dass die Sicherheitskriterien sowohl umfassend als auch korrekt dargestellt werden.
Ziehen Sie in Erwägung, Zugangsrichtlinien, Prüfberichte oder Spezifikationen für den Benutzerzugriff bereitzustellen. Der Autopilot wertet diese unterstützenden Dokumente aus, um die Ausrichtung auf die in der Anforderungsbeschreibung angegebenen Zugangskriterien zu überprüfen. Diese Bewertung trägt zur Bestätigung bei, dass die Leitlinien effektiv in die Anforderung integriert und frei von Widersprüchen sind.
Erwägen Sie, Checklisten zur Einhaltung von Vorschriften, Zusammenfassungen von Vorschriften oder für Ihre Branche relevante Compliance-Anforderungen bereitzustellen. Der Autopilot wertet diese Checklisten aus, um sicherzustellen, dass sie mit den in der Anforderungsbeschreibung beschriebenen Konformitätskriterien übereinstimmen. Dies hilft bei der Identifizierung potenzieller Inkonsistenzen oder Lücken bei der Einhaltung der Vorschriften.
Dieser Abschnitt beschreibt die aktuellen Einschränkungen von AutopilotTM.
Sie können nur die folgenden Dateierweiterungen hochladen, von denen Autopilot nur den Textinhalt verarbeitet:
- DOCX
- XLSX
- TXT
- PNG
- JPG
- BPMN
Die Eingabetokenkapazität von Autopilot beträgt 128.000 Token, was ungefähr 96.000 Wörtern oder 512.000 Zeichen entspricht.
Stellen Sie sicher, dass Ihre Anforderungsbeschreibung und die unterstützenden Dokumente diese Grenzwerte nicht überschreiten.
Um die ungefähre Anzahl der Token in Ihren Dokumenten zu überprüfen, öffnen Sie das Dokument als TXT-Datei und kopieren Sie den Inhalt in das Open AI Tokenizer-Tool. Die angegebene Anzahl der Token ist ein Näherungswert. Die tatsächliche Tokenanzahl kann höher sein.
