Nexus StudioにおけるFLAKY判定とは何ですか?
FLAKYは、何も修正されていない状態で、一度失敗した後にリトライで成功したテストに対する判定です。Jiraチケットは作成されず、動画も保持されず、CIでは終了コード0を返しますが、レポートおよび履歴(History)には条件付きの合格として記録が残ります。
FLAKYとなったテストはどうすればよいですか?
失敗した試行のraw-data.jsonを確認し、次に履歴(History)の傾向を確認してください。アプリケーションまたはテストのいずれかが不安定になっており、何も修正されていません。
FLAKYとBREACHED_FLAKYの違いは何ですか?
FLAKYは最終的に合格で終了します。BREACHED_FLAKYは失敗自体が一貫していない失敗で終了するため、リトライで隠されることはなく、チケットも作成されます。