引き続きMagicPodのモバイルアプリテスト版の基本的なテスト作成方法を説明します。
1.生成AI機能を使う
MagicPodでは、自然言語での指示だけでテストケースの作成・編集・実行ができるテスト自動化エージェントのMagicPod Autopilotなど、テスト自動化を加速化させるAI関連の新機能が続々と追加されています。
生成AI機能を活用することで、より効率良くテスト自動化を行なっていきましょう。
1−1.生成AI機能を有効化する
生成AI機能を使用するためには、まず生成AI機能を有効化する必要があります。
まずは組織の設定画面 の「オプション機能」タブを開いてください。（この画面は、組織の更新権限があるユーザーのみ開くことができます）
そして生成AI機能の「有効にする」を選択した後更新します。
これで生成AI機能が使えるようになりました。早速MagicPod Autopilotを使ってみましょう。
1−2.MagicPod Autopilotでテストを作成する
⚠️MagicPod Autopilotの利用にはAIクレジットが必要ですが、毎月無料利用枠／初回無料利用枠を用いることで無料でお試しいただけます。
テストケース編集画面を開き、右上の「起動」ボタンをクリックしてクラウドブラウザを立ち上げます。
その後、右下にあるアイコンをクリックします。
表示されたダイアログに依頼したい内容を入力し、実行ボタンを押してください。
例えばAndroidの連絡先アプリで連絡先を追加するテストを作成してもらいましょう。
連絡先ページに移動して、適当な氏名と会社名で連絡先を追加するテストを作成して
しばらく待つと、結果が表示されます。テストが編集された場合は自動的に画面上の表示が更新されます。
その後は必要に応じて追加指示を出したり、手動でテストケースを編集してましょう。
このようにMagicPod Autopilotを用いると、１から手動で作成するよりも短時間でテストケースを作成できます。
活用のコツについては、Autopilotを使いこなすで解説していますのでぜひご覧ください。
1-3.その他の生成AI機能を知る
人間の目視確認を自動化するAIアサーションなど、他にも便利な生成AI機能があります。
こちらのヘルプページをご参照ください：生成AI関連の機能を利用する
2.日次ビルド＋一括テスト実行スケジュール設定
テストをいくつか作成できたら、毎日ビルド＋一括テスト実行できるようスケジュールを組んでメールまたはSlackへ結果通知できるよう設定しましょう。
2−1.MagicPod一括実行設定の作成
まずはMagicPodで一括実行するための設定をします。
設定したいプロジェクトの「テスト一括実行」タブ内にある「詳細」をクリックします。
左上の「設定名」より、既存の設定を選択するか、新しい設定を追加してください。
環境を「クラウド」、アプリ種別を「クラウドアップロード」※1 にします。
2−2.テスト結果メール通知の設定
メール通知は「共通設定」から「テスト結果をメール通知」を「有効」にします。（デフォルトでは無効になっています）
「有効（成功時以外のみ）」に設定した場合、テスト結果が「成功」以外（失敗、中止、要確認）の場合のみ、メール通知が行われます。
参考：メールで通知を受け取る
2−3.テスト結果Slack通知の設定
Slack通知は「共通設定」から「テスト結果をSlack通知」を「する」にすると、「追加」が表示されるのでそれをクリックします。
ポップアップが出てきたら任意の名前を入力し、「Slack連携」をクリックします。
通知を飛ばしたいチャンネルを選択し、「許可する」をクリックします。
成功／失敗／要確認／中止で通知の可否を設定する方法はSlackで通知を受け取るを参照してください。
2-4.テストのスケジュール実行設定(Bitriseの場合)
まずAppファイルの作成方法-1.Bitriseを使う場合の手順に従い、ソースコードからAppファイルを作成するBitriseのビルド設定を作成します。
2-4-1.BitriseのビルドからMagicPodを実行する
BitriseとMagicPodを連携させます。BitriseのWorkflowを押します。
「Xcode build for simulator」ステップの下の「+」ボタンを押し、
「MagicPod」のステップを検索して追加します。
追加できたら、各項目の「Enter value」を押して設定しましょう。
- MagicPod API token
- 「$」を押して、「+ Create」を押します
-
「Key」に「MAGICPOD_API_TOKEN」、「Value」にMagicPodのAPIトークンページからコピーした値をセットし「Create」を押します。
- 「$」を押して、「+ Create」を押します
- Organization name
-
MagicPodで使っている組織名を指定します。(「表示名」ではなく、組織のURLに使われているアルファベットの名前なので注意してください。)
-
- Project name
-
MagicPodで使っているプロジェクト名を指定します。(「表示名」ではなく、プロジェクトのURLに使われているアルファベットの名前なので注意してください。)
-
- Test settings number
-
1−1.MagicPod一括実行設定の作成にて作成した設定の番号を指定します。
-
他にも色々とパラメータがありますが、あとは初期値のままでも動きます※2。これで、BitriseでビルドしたアプリがMagicPod側にもアップロードされ、CIのタイミングでテストが実行されるようになります。
終わったら修正内容を保存し、
ビルド画面へ移動し、
再度ビルドを実行します。
無事テストが完了すれば、
Bitriseのテスト結果メールに加え、
MagicPodのテスト結果メールも配信されるはずです。
なお、設定を調整すれば、以下のようなテストも可能です。
- アップロードしたアプリに対し、複数の端末パターンでテストを並列実行
- アップロードするアプリをappファイルからIPAファイルに変更し、SauceLabs/BrowserStackなどの外部クラウドサービス上でビルドしたアプリの実機テスト
2-4-2.Bitriseのビルドを定期的に実行する
Bitriseビルド画面右上の「Schedule a Build」を押します。
ビルド構成のポップアップウィンドウが出てくるので、ビルドしたい時間、曜日、Branchを指定したら「Next」を押します。
対象のビルドを選択したら「Schedule build」を押します。
これでビルドのスケジュール設定が完了しました。
2-4-3.レポジトリへのPushやPull Requestのたびにビルドを実行する
初期設定のところでWebhookを設定した場合、GitレポジトリへのPushまたはPull Requestがあったタイミングで自動的にビルドが行われます。このタイミングは、以下の方法で調整が可能です。
- Workflow EditorのTriggersタブから、Push、Pull Requestなどのビルド開始のタイミングを調整できます※3 。
- ビルド結果は自動的にGitHubなどの画面に連携され、PushやPull Requestに対するビルド結果を簡単に確認できます。
- Pushに対するビルド結果の表示
- Pull Requestに対するビルド結果の表示
- Pushに対するビルド結果の表示
2-5.テストのスケジュール実行設定(CircleCIの場合)
CircleCIでもMagicPodと連携して、ビルドとテスト実行をスケジュール設定できます。
詳しい設定方法は以下を参照してください。
※注釈・出典
- テスト対象アプリはBitriseからアップロードしたものが利用されるため、一括実行の設定画面では何を設定しておいても構いません。
- 設定を変えれば、テスト完了まで待機するかや、テスト終了後にMagicPodにアップロードしたアプリを削除するかなどを選べます。
- ビルドのトリガー
3.使いこなすための機能紹介
すべてのコマンドを知りたい方は→コマンド一覧
導入初期によくある質問や操作のコツは導入初期に役立つTips(モバイルアプリ)で紹介しています。
- スクロールが必要な画面の操作方法
- Emailのテスト
- WebViewのテストについて
- 共有ステップの活用 作成数の上限なし
- 変数の活用
- 条件分岐の活用
- 画像差分チェック
- 自動テストを簡単にするためのアプリ実装の工夫
- テストの安定性を向上させるには
- モバイルアプリテストのよくある質問
次は各種設定するための画面、用語を説明します。