Was ist das FLAKY-Verdict in Nexus Studio?

FLAKY ist das Verdict für einen Test, der fehlgeschlagen ist und dann bei einem erneuten Versuch erfolgreich war, ohne dass etwas repariert wurde. Es wird kein Jira-Ticket erstellt, kein Video aufbewahrt und CI beendet mit Exit-Code 0, aber es bleibt im Bericht und in der Historie als bestanden mit Vorbehalt sichtbar.

Was sollte ich mit einem FLAKY-Test tun?

Lesen Sie die Datei raw-data.json des fehlgeschlagenen Versuchs und prüfen Sie anschließend den Verlaufstrend. Etwas in der Anwendung oder im Test ist instabil, und es wurde nichts repariert.

Wie unterscheidet sich FLAKY von BREACHED_FLAKY?

FLAKY endet mit einem Pass. BREACHED_FLAKY endet mit einem Fehler, der selbst inkonsistent ist, sodass ein erneuter Versuch ihn niemals verbirgt und tatsächlich ein Ticket erstellt wird.

FLAKY: Fehlgeschlagen, dann war ein erneuter Versuch erfolgreich; nichts wurde behoben. Alle 14 Verdicts, wie sie entschieden werden.