Was sind die 14 Verdicts in Nexus Studio?
Nexus Studio ist ein On-Premise-QA-Betriebssystem, das jeden Durchlauf in eines von 14 forensischen Verdicts statt in Pass oder Fail einteilt, sodass ein echter Defekt von einem langsamen Netzwerk, einer Bot-Challenge oder einem abgestürzten Browser unterschieden werden kann. Die Tabelle zeigt für jedes Verdict, was es bedeutet, ob es ein Jira-Ticket öffnet und ob sein Fehlervideo gespeichert wird.
| Verdict | Typ | Bedeutung | Jira-Ticket? | Video? |
|---|---|---|---|---|
| SECURE | Bestanden | Von selbst bestanden: kein erneuter Versuch, kein reparierter Selektor. | No | No |
| CHAOS_RESILIENT | Bestanden | Bestanden, während ein Fehler injiziert wurde, die App hielt also stand. | No | No |
| AUTO_RECOVER | Bestanden, mit Vorbehalt | Bestanden, aber ein Selektor musste repariert werden. | No | No |
| FLAKY | Bestanden, mit Vorbehalt | Fehlgeschlagen, dann durch erneuten Versuch bestanden; nichts wurde behoben. | No | No |
| PERFORMANCE_DEGRADED | Bestanden, mit Vorbehalt | Assertionen bestanden, die Seite war zu langsam. | No | No |
| A11Y_VIOLATION | Bestanden, mit Vorbehalt | Assertionen bestanden, Barrierefreiheit nicht. | No | No |
| SECURITY_VIOLATION | Bestanden, mit Vorbehalt | Assertionen bestanden, eine Sicherheitsprüfung nicht. | No | No |
| BREACHED | Anwendung stürzte ab | Ein echter Befund: Eine Assertion schlug fehl und nichts in der Umgebung erklärt dies. | Ja | Ja |
| BREACHED_FLAKY | Anwendung stürzte ab | Fehlgeschlagen, und der Fehler selbst ist inkonsistent. | Ja | Ja |
| CHAOS_BREACHED | Anwendung stürzte ab | Unter injiziertem Chaos zusammengebrochen. | Ja | Ja |
| TIMEOUT | Umgebung | Nie rechtzeitig geantwortet, was kein Beweis dafür ist, dass es defekt ist. | Ja | Optional, standardmäßig deaktiviert |
| UNREACHABLE | Umgebung | Der Host konnte überhaupt nicht erreicht werden. | No | No |
| BLOCKED | Umgebung | Die Website wehrte sich mit einem 403, einem 429 oder einer Bot-Challenge. | No | Optional, standardmäßig deaktiviert |
| CRASHED | Harness | Der Browser oder der Prozess stürzte ab. | No | No |
Jira und Azure Boards öffnen ein Issue pro Test, und das nur, wenn die Integration aktiviert ist. Das Video folgt der Einstellung „Keep failure video for“: standardmäßig BREACHED, BREACHED_FLAKY und CHAOS_BREACHED. Wie über die 14 Verdicts entschieden wird und die Dateien, die jedes Verdict hinterlässt.