AI テスト自動化とは、試験の筋書き作り・試験の作成・試験の質の確かめを、AI の席に分けて任せることです。
- e2e テストを AI に任せるときの、3 つの席の分け方と受け持ち
- それぞれの席が「やる事」と「やらない事」
- 試験を見る側の道具が効いているかを、当社がどう確かめているか
試験の段を、筋書き・書く・質を見るの 3 席に割る
AI アプリ開発 の頁では、要件から本番へ出すまでを工程ごとの席に任せる形を書きました。この頁はその「試験」の段を、もう一段細かく割った手引きです。席とは、ある仕事を受け持つ AI の持ち場のことで、全体の考え方は AIエージェント の頁にまとめています。
テスト自動化を AI に任せるとき、1 体に「試験を作って通しておいて」と頼むと、合格の形を決める人と、試験を書く人と、通ったかを判定する人が同じになります。ブルーランプの棚では、この 3 つを別のエージェントが受け持ちます。
| 席 | 棚のエージェント | 受け持つ事 | やらない事 | 配っている段・更新日 |
|---|---|---|---|---|
| 筋書きを書く | E2Eテスト設計 | 画面の実装が決まった直後に、通しの試験の仕様書を「正解の定義」として作る | 画面を通した操作の流れの外は扱わない | 奥伝から・2026-09-23 |
| 試験を書く | E2Eテストファイル一括作成 | 仕様書の項目を試験のプログラムに写す | 試験を走らせない・ブラウザを起動しない | 初伝から・2026-06-23 |
| 質を見る | 品質担保(全テスト横断監査) | 全部の試験のファイルを横断して読み、素通りさせる誤魔化しを見つける | 他のエージェントの「通りました」の報告を判定の材料にしない | 奥伝から・2026-06-23 |
出典: https://bluelamp.ai/agents/e2e-test-spec 、https://bluelamp.ai/agents/e2e-test-file-writer 、https://bluelamp.ai/agents/test-quality-audit (どれも 2026-10-24 に見た)
「E2E」は、利用者と同じ順に画面を最初から最後まで通して試すことです。門を置く考え方そのものと、試験を走らせる役・直すかを決める役の組は AIエージェントの欠点と門 にあります。この頁は、その手前の「何を試すか」と、後ろの「試験が本物か」を受け持つ席の話です。
手順 1: 筋書きの席に「何ができれば合格か」を先に書かせる
E2Eテスト設計 は、画面の実装が決まった直後に呼びます。コードの中身から試験を考えるのではなく、利用者の目線で「この画面で何ができれば合格か」を先に書きます(https://bluelamp.ai/agents/e2e-test-spec ・2026-10-24 に見た)。
1 頁の項目は 5〜10 に絞る
試験の項目は 1 頁につき 5〜10 に絞り、それを超えたら試験ではなく画面の設計の方を見直します(https://bluelamp.ai/agents/e2e-test-spec ・2026-10-24 に見た)。1 つの画面で確かめたい事が 10 を超えるなら、その画面に仕事を詰め込みすぎている合図として読みます。
対象は画面を通した操作の流れだけ
この席が扱うのは、画面を通した操作の流れだけです(https://bluelamp.ai/agents/e2e-test-spec ・2026-10-24 に見た)。部品ひとつずつの細かい確かめまで仕様書に入れると、項目が膨らんで上の 5〜10 の線を守れなくなります。
手順 2: 書く席には書くことだけを渡す
E2Eテストファイル一括作成 は、仕様書の項目を試験のプログラムに写す席です。書くことだけに専念し、試験を走らせたり、ブラウザを起動したりはしません(https://bluelamp.ai/agents/e2e-test-file-writer ・2026-10-24 に見た)。
| 決まり | 中身 |
|---|---|
| 入力 | 筋書きの席が作った仕様書の項目 |
| 1 回の呼び出しの受け持ち | 1 ファイル |
| 揃える形 | 全部の試験を同時に走らせられる形 |
| しない事 | 試験を走らせる・ブラウザを起動する |
出典: https://bluelamp.ai/agents/e2e-test-file-writer (2026-10-24 に見た)
1 回の呼び出しで 1 ファイルなので、頁が増えても呼び出しを並べるだけで済みます。全部の試験を同時に走らせられる形に揃えておくのは、後ろの質を見る席が最後にまとめて走らせ直すときの前提にもなります。
手順 3: 質を見る席に、報告ではなくコードを読ませる
テスト自動化 ai に任せたときに怖いのは、試験が落ちないように試験の側を緩めることです。品質担保(全テスト横断監査) は、全部の試験のファイルを横断して読み、試験を素通りさせる誤魔化しを見つけます。判定の材料は他のエージェントの「通りました」の報告ではなく、試験のコードそのものです(https://bluelamp.ai/agents/test-quality-audit ・2026-10-24 に見た)。
| この席が拾う物 | どう見えるか |
|---|---|
| 不正な代用 | 本物の代わりに、通るように作った物で試している |
| 飛ばし | 試験が飛ばされていて、走っていない |
| 固定の答え | 答えが決め打ちで、中身が変わっても通る |
| コメントで消された確認 | 確かめる行が消されて、何も確かめていない |
出典: https://bluelamp.ai/agents/test-quality-audit (2026-10-24 に見た)
読み終えたら、最後に全部の試験を走らせ直します。違反が見つかった物は自分で直さず、担当の工程へ差し戻します(https://bluelamp.ai/agents/test-quality-audit ・2026-10-24 に見た)。直す席と見る席を分けたままにしておくと、見る席が「自分で直したから通る」と言える道が残りません。
当社の記録: 見る側の道具も、わざと壊した物で試す
試験の質を見る席を置いても、その見る仕組みが何も落とさないなら意味がありません。当社の検査の道具は、「わざと壊した物を落とせるか」を自分で試す口(自己試験)を持っています(社の実測 2026-10-24)。
たとえば、台帳の行が欠けた物を渡すと落ちること、ずれの無い物を渡すと 0 件になることを確かめます(社の実測 2026-10-24)。壊れた物を落とせて、正しい物を落とさない。この両方が見えて初めて、その道具の「0 件」を信じられます。当社の決まりの紙には「落ちない門は死んでいる」と書いてあります(社の実測 2026-10-24)。
試験そのものにも同じ見方が使えます。e2e テストを ai に書かせたら、通ったことだけでなく、壊した画面で落ちるかも一度見ておくと、素通りする試験を早く見つけられます。
よくある質問
AI テスト自動化は、1 体の AI に全部任せてはいけませんか?
任せることはできますが、合格の形を決める・試験を書く・通ったかを見る、が同じ席になります。ブルーランプの棚では、E2Eテスト設計・E2Eテストファイル一括作成・品質担保(全テスト横断監査)の 3 体に分けています(https://bluelamp.ai/agents/e2e-test-spec 、https://bluelamp.ai/agents/e2e-test-file-writer 、https://bluelamp.ai/agents/test-quality-audit ・2026-10-24 に見た)。
e2e テストの項目は、1 画面にいくつ書けばよいですか?
E2Eテスト設計は、1 頁につき 5〜10 に絞ります。超えたら画面の設計の方を見直します(https://bluelamp.ai/agents/e2e-test-spec ・2026-10-24 に見た)。
AI が「試験は全部通りました」と言ったら、信じてよいですか?
報告ではなく試験のコードを読んで確かめます。品質担保(全テスト横断監査)は、不正な代用・飛ばし・固定の答え・コメントで消された確認を拾い、最後に全部を走らせ直します(https://bluelamp.ai/agents/test-quality-audit ・2026-10-24 に見た)。
試験を書く AI に、試験を走らせるところまで頼めますか?
E2Eテストファイル一括作成は、書くことだけに専念し、試験を走らせたりブラウザを起動したりはしません。1 回の呼び出しで 1 ファイルを受け持ちます(https://bluelamp.ai/agents/e2e-test-file-writer ・2026-10-24 に見た)。
出典
- https://bluelamp.ai/agents/e2e-test-spec (E2Eテスト設計・更新 2026-09-23・奥伝から・2026-10-24 に見た)
- https://bluelamp.ai/agents/e2e-test-file-writer (E2Eテストファイル一括作成・更新 2026-06-23・初伝から・2026-10-24 に見た)
- https://bluelamp.ai/agents/test-quality-audit (品質担保(全テスト横断監査)・更新 2026-06-23・奥伝から・2026-10-24 に見た)
- 社の実測 2026-10-24(検査の道具の自己試験・台帳の行が欠けた物で落ち、ずれの無い物で 0 件・決まりの紙の「落ちない門は死んでいる」)