MagicPodの導入効果をレビューでご紹介(株式会社PHONE APPLI-pa-d-matsuyama)

導入背景

2020年ごろはウォーターフォール型の開発プロセスでテストを手動実行していました。かなり丁寧にテストを進めていましたが、徐々にスクラム開発に移行していく中で、アジャイル開発とは相性があまり良くありませんでした。機能開発にテストが追いついていくので精一杯となってしまっており、改善に時間を割くことができていない状況にありました。

また、前職の経験でWeb系のサービス開発では、テストを自動化していくのが当たり前であり、そうした自動化の重要性を知っていたこともあり、テストの標準化から始めていき、自動化に着手していきました。

比較検討したサービス

• Selenium
• Autify
• Ranorex
• Katalon Studio

選定理由

• Seleniumは導入のタイミングのハードルが高く、ある程度のプログラミングスキルが求められます。初期に関わってもらうメンバーのスキルと今後の拡大性を考えて商用のノーコード・ローコードツールを選択しました
• Web系、スマホアプリの両方の自動化が必須であり、当時はまだAutifyはスマホアプリには対応していなかったため、MagicPodに決めました

導入時の苦労・悩み

• 2020年導入初期
  • 若手のメンバーを1名アサインして、ほぼ任せる形で運用を開始
  • 手動で作成したテストケースを元に、MagicPodを触って自動化を始めてもらいました
  • 今から振り返ると、もう少しサポートに入ってもよかったと思いますが、MagicPodの使い始めのハードルの低さとMagicPodの方にサポートいただけたこともあり、順調に自動化が始まりました
• 2021年
  • 1年ほどして1人では限界が見えてきたこと、テストケース全体を見た上での構成を考える必要があったため、MagicPodのテスト自動化おまかせプランを利用して、テスト自動化の専門のエンジニアに常駐いただき、仕組みづくりを開始しました
• 現在
  • 大枠も完成し、現在はテスト自動化チーム4名で自動化の範囲を広げています

導入に向けた社内への説明

よく使う機能

ツールの良い点

ツールの課題点

その他

今後に向けて

• OSのバージョンアップで問題なく動作するかをチェックしているので、テストセットでタグを作り基本機能セットとして一括実行ができる状態にしていきたい
• 現在は4名の自動化チームを全員ツールを使える状態にしていくことで、各個人が見ている範囲をそれぞれが自動化していけるようにしたい
• テスト管理ツールと連携して実行結果をまとめていきながら進捗状況やテスト通過率を計測してレポートにまとめていきたい

ツールを検討されている方へ

テスト自動化により世の中には、コスト削減となると考える方もいらっしゃいますがこれは間違いです。導入時・ランニングコストとしてもお金・時間・リソースがかかるため、テストが自動化されることにより、開発速度が上がるという点を伝えていくのが良いと思います。

また、導入時にどの程度のスキルを持ったエンジニアリソースを割けるのかによって、選択するツールは変わります。ある程度エンジニアリングリソースを割けることができるのであれば、ノーコードではなく、カスタマイズがしやすいSeleniumでも良いかと思います。一方で、あまりリソースを避けられない場合や何か制限がある場合は、手軽に使えるテストツールを活用するのがおすすめです。