一括実行をリトライする

一括実行結果詳細画面からリトライする

MagicPod Web APIからリトライする

/v1.0/{organization_name}/{project_name}/batch-run/{batch_run_number}/retry/

• targetで、全テストケースか失敗したテストのみかを指定できます。
• patternsで、複数パターンが存在する場合にどれをリトライするかを指定できます。

実行中の失敗テストのリトライ機能との使い分け

2つの機能の違い

実行中の失敗テストのリトライ機能の特徴

• 有効なユースケース
  • 不安定で、頻繁に失敗するが再実行すれば成功するテストケースがある場合
  • なるべく再実行せずに一度ですべて成功の実行結果を出したい場合
• 課題
  • 不安定な問題とは別に実際の不具合がある場合、リトライを繰り返すことで実行時間が長くなってしまう
  • 1回目の実行では失敗して2回目では成功するようなタイプの不具合があった場合に見落とす可能性がある

本ページのリトライ機能の特徴

• 有効なユースケース
  • 日次実行で、最終的にすべてのテストケースが通ったことを確認したい場合
  • 特定の原因で複数のテストケースが失敗したあと、修正確認を行いたい場合
• 課題
  • 一括実行が完了（中止でもOK）しないとリトライが行えない

注意・制約事項

• テスト設定番号を指定していない一括実行はリトライできません。また、リトライの際はその番号で保存された設定がそのまま使われるため、設定内容を部分的に上書きすることはできません。リトライ機能が利用できないのは、以下のケースです。
  • コマンドラインからの実行で「詳細設定」を選択している

    

  • 一括実行設定番号を使いながら一部設定を上書きしてテストを実行したい に従って設定内容を上書きしている
  • ローカルPC環境のコマンドラインからの実行で、設定内容を直接記述する場合 に従っている
• リトライの際はテスト設定を番号で、テストパターンを名前で探します。そのため、テストパターンの名前を変更した場合や、テスト設定・テストパターンを削除した場合はリトライできません。（テスト設定の名前の変更は問題ありません）

  

• このリトライ機能では、最新のテストケース・設定の内容を使って一括実行をやり直します。一括実行後にテストケースや設定を変更した場合は、その内容が反映されます。テストケースを削除した場合、そのテストケースは実行されません。（残りのテストケースは実行されます）
• データパターンを含む実行については失敗したパターンのみが再実行されますが、1*10のような指定で同じテストケースを繰り返している場合、リトライされる内容が想定と異なることがあります。