E2Eテストのカバレッジはどう定義する？「全量」をチームの合意で決めるための考え方
こんにちは、MagicPodでエバンジェリストをしているYoshiki Itoです。 E2Eテストの自動化を進めるなかで、「カバレッジをどう定義・計測すればいいか」という問いに直面することがあります。ツール導入の目標設定や、社内での効果説明に使いたいなど、さまざまな場面で必要となるようです。 本記事では、E2Eテストにおけ...
#テスト自動化
MagicPodの失敗分析機能を使ってみた—AIによるテスト失敗原因の調査と修正提案
こんにちは、MagicPodでエバンジェリストをしているYoshiki Itoです。 テスト自動化を運用していると、避けて通れないのが「テストが失敗したときの原因調査」です。自動テストが増えるほど、失敗時に「なぜ失敗したのか」を確認する手間も増えていきます。 スクリーンショットを一つひとつ確認したり、実行ログを確認し...
AIコーディングでスキル17%低下!?テスト自動化のプロが解説
「AIに頼るほど、自分のスキルは大丈夫なのか」 Anthropicが現役エンジニア52名を対象に実施した実験が、この問いに答えを出しました。この研究結果をQA・テストエンジニアの視点で読み解き、そしてどのようにAIと向き合えばよいのかについて、MagicPodとしての考えをお伝えします。 「Claude」の開発元Anthropicが実施...
「開発生産性の3階層」で考えるQAエンジニアの事業貢献
こんにちは。MagicPodでエバンジェリストをしているYoshiki Itoです。 先日、株式会社ベリサーブ・株式会社MagicPod共催のオンラインセミナー「テスト自動化とQAの事業貢献～3社で語る攻めの品質創造とは～」にて、LINEヤフーコミュニケーションズ野原さん・広瀬さん、ベリサーブ髙田さん・長橋さんと一緒に「QAの事業貢...
どんなテストから自動化すればいいの？自動化の対象となるテストを選ぶ際の方法3つ
こんにちは。MagicPodでエバンジェリストをしているYoshiki Itoです。 システムテストやE2Eテストと呼ばれる種類のテストを自動化しようと思ったとき、「どんなテストから自動化すればいいの？」「自動化に向いているテストってどんなテスト？」といった疑問が出てきます。 本記事では、自動化する対象のテストシナリオ...
E2Eテストはどこまでやるべき？ 「テスト全体像」から範囲を決定する2つのヒント
こんにちは。MagicPodでエバンジェリストをしているYoshiki Itoです。 MagicPodに限らず、E2Eテストの自動化に取り組み始めた方が疑問に思うのが 「E2Eテストってどのくらい／どこまでやればいいの？」 という点です。 かつてシステムテストやE2Eテストの自動化がいまほど普及していなかった頃には、 なんでもかんでも自...
テスト自動化の成功・失敗を分けるのは「継続性」
こんにちは。MagicPodでエバンジェリストをしているYoshiki Itoです。 システムテスト自動化は、関連書籍が複数出版されるなど、以前と比べて普及が進んでいるように思います。毎年年末ごろに行われているテスト自動化カンファレンスのアンケート結果でも、システムテスト自動化の経験がない方は2024年末で29%と、41%で...
