手短な答え
GitHub上で自動テストを実行する方法は二通りあり、ほとんどの比較記事はそのうちの一方しか説明していません。
ワークフロー内で実行する
.github/workflows/にフレームワークをインストールしてスイートを実行するジョブを追加します。Playwright、Cypress、Lighthouse CI、k6 はすべてこの方式で動作します ― YAMLとランナーの分数はあなたが管理します。
ワークフローをリッスンする
パイプラインがすでに生成しているデプロイイベントを監視し、結果として得られるURLに対してテストを実行し、プルリクエストにコメントするGitHub Appをインストールします。ワークフローファイルもリポジトリの変更も不要です。
二つ目のアプローチはより新しく、はるかに手間がかかりません。なぜなら必要なシグナル ― 「ビルドがデプロイされ、URLが稼働している」―はパイプラインがすでに発しているものだからです。以下では両方を扱います。
優れたCIツールと優れたローカルツールを分けるもの
本物の判定を待つ
実行がディスパッチされたことだけをもって0で終了するステップは、チェックが存在しないより悪いです。明示的な待機と文書化されたタイムアウトを探しましょう。
失敗のシグナルが具体的である
失敗したテスト、期限切れのキー、枯渇したクォータは三つの異なる問題です。この三つを同一に報告するツールは、パイプラインにあなたを欺かせます。
部分実行では大きな声で失敗する
最も危険なCI結果は、ケースの半分を静かにスキップしたスイートの上にあるグリーンチェックです。
2026年ベストGitHub Actions自動テストツール
TestSprite
TestSprite は、ここに挙げるツールの中で唯一ワークフローファイルを必要としません。GitHub Appとしてインストールされ、既存のパイプラインが生成するデプロイイベントを受け取り、対象URLを解決し、それに対してテストを実行し、結果をプルリクエストのコメントまたはコミットチェックとして投稿します。
イベントを読み取るだけなので、この連携はパイプラインの内側ではなく隣に位置します ― ワークフローを変更したり置き換えたりすることはありません。セットアップには約10分かかり、GitHub Appをインストールするには管理者権限が必要です。リポジトリへの変更:なし。
トリガーはプロジェクトごとに設定されます。プルリクエストトリガーはマージ前にリグレッションを捕捉しPRにコメントし、ブランチへのプッシュトリガーはマージのたびに共有ステージングまたは開発環境をテストしてコミットチェックを投稿します。テストが通過するまでPRをブロックのトグルにより、そのチェックが必須になり、テストが失敗している間はマージがブロックされます。
結果コメントは、AI生成コードを出荷するチームのために作られています。合格・失敗の件数、品質スコア、失敗した瞬間のスクリーンショットに加えて、各失敗には修正提案プロンプト ― 起こりうる根本原因を説明する、コーディングエージェントにそのまま貼り付けられるようにコピー用意された文章 ― が付属します。自分でパイプラインを駆動したいチームのために、オープンソースのTestSprite CLIが、どのCIシステムからでも同じ仕事を行います。
メリット
ワークフローファイルもリポジトリの変更も不要 ― あなたがすでに生成しているイベントをリッスンする
結果はPRコメントまたはコミットチェックとして届き、マージをブロックする任意の必須チェックも選べる
各失敗にAIコーディングエージェント向けのコピー用意された修正プロンプトが付属
Vercel、Amplify、Netlify、セルフホストなど、GitHubにデプロイを報告する任意のプロバイダーで動作
デメリット
まずデプロイイベントが存在する必要がある。一度もデプロイしないリポジトリにはトリガーする対象がない
GitHub Appのインストールには組織の管理者権限が必要で、オーナーを待つことになる場合がある
実行はTestSpriteのクラウドで行われ、ワークスペースのクレジットを消費する ― フロントエンド実行あたり0.5、バックエンド実行あたり0.2
こんな方におすすめ
パイプラインがすでにプレビューまたはステージングのデプロイを生成しているチーム
さらにYAMLを保守することなく必須のマージチェックを求める人
おすすめの理由
既存のパイプラインを再構築させるのではなく、それを真実の情報源として扱います。
Playwright
Playwright は、Actions内でのブラウザテストに最も強力なオープンソースの選択肢であり、Microsoft がCIセットアップをきちんと文書化しています。
標準的なジョブは依存関係をインストールし、npx playwright install --with-depsを実行し、続けてnpx playwright testを実行します。HTMLレポートはactions/upload-artifactで問題なくアップロードでき、ジョブマトリクスにまたがるシャーディングもよくサポートされています。
コストは、コールドキャッシュ時のブラウザインストール時間と、失敗した実行が診断ではなく読むべきトレースを与えるという点です。
メリット
実行ごとのコストなしで無料 ― 支払うのはランナーの分数のみ
ジョブマトリクスにまたがる優れたシャーディング
トレースビューアの成果物は事後分析に本当に役立つ
デメリット
playwright install --with-depsはコールドキャッシュ時に実際の時間を要するアノテーションとジョブサマリーには追加の設定が必要
テストの作成と保守は完全にあなたの責任
こんな方におすすめ
すでにリポジトリにテストがあり、ランナーの分数を使える余裕があるチーム
決定論的なセルフホスト実行を必要とするプロジェクト
おすすめの理由
CIドキュメントが正直かつ完全であり、それはあるべき水準よりも珍しいことです。
Cypress
Cypress は公式アクションcypress-io/github-actionを提供しており、インストール、キャッシュ、実行を一つのステップで処理します。
小規模なスイートであれば設定はほぼゼロに近く、Cypress Cloudへの記録は非エンジニアでも追える洗練された失敗リプレイを生み出します。
規模が大きくなると事情は変わります ― 意味のある並行実行には有料のCypress Cloudプランが必要であり、スペックごとのブラウザ起動が長いスイートをランナー分数の面でコストのかかるものにします。
メリット
公式アクションがインストールとキャッシュを処理
デバッグ用の優れた記録済みリプレイ
最初のグリーンチェックまでが非常に速い
デメリット
意味のある並行実行には有料クラウドプランが必要
スペックごとのブラウザ起動が大規模なスイートを遅くする
クロスオリジンフローには回避策が必要
こんな方におすすめ
すでにCypressに投資しており、スイートが素早く完了するチーム
リプレイの品質が非エンジニアにとって重要なプロジェクト
おすすめの理由
公式アクションがセットアップの推測作業のほとんどを取り除きます。
Lighthouse CI
Lighthouse CI は、機能テストが見落とすリグレッション ― 依然として動作するがロードが悪くなったページ ― を捕捉します。
treosh/lighthouse-ci-actionは、プレビューデプロイを含むURLに対して監査を実行し、lighthouserc.jsonで定義された予算がジョブが合格するかどうかを決定します。パフォーマンス、アクセシビリティ、SEOが、誰も開かないレポートではなく合格/不合格のチェックになります。
これは補完的なものであり、代替物ではありません。Lighthouse はバンドルが400KB増えたことを教えてくれますが、チェックアウトボタンが送信されなくなったことは教えてくれません。
メリット
パフォーマンスとアクセシビリティの予算をブロッキングチェックに変える
プレビューデプロイを含む任意のURLに対して実行
過去のトレンドが緩やかなリグレッションを可視化する
デメリット
機能的なカバレッジは一切ない
スコアは実行ごとに変動するため、しきい値の調整が必要
デプロイされたURLまたはジョブ内で起動されたサーバーが必要
こんな方におすすめ
パフォーマンスまたはアクセシビリティのコミットメントを守る必要があるチーム
ロード時間が製品そのものであるコンテンツ・マーケティングサイト
おすすめの理由
パフォーマンスを四半期ごとの議論ではなくビルドの失敗にします。
k6
k6 は、他のツールが無視する問いに答えます ― 負荷がかかってもまだ動くか?
grafana/setup-k6-actionがバイナリをインストールし、k6 run script.jsが残りを行います。スクリプト内のしきい値が終了コードを決定するため、レイテンシのリグレッションは壊れたアサーションとまったく同じようにパイプラインを失敗させます。
すべてのプルリクエストでフルの負荷テストを実行するのは通常無駄です。ほとんどのチームは毎晩スケジュール実行するか、ラベルの後ろにゲートします ― これはツールの制約ではなくワークフロー上の判断です。
メリット
しきい値がパフォーマンス予算を終了コードに直接マッピング
JavaScriptでスクリプト化でき、リポジトリとともにバージョン管理される
トレンドデータのための強力なGrafana連携
デメリット
すべてのプルリクエストに適しているとは限らない ― スケジュール実行の方が良い
商用に組み込む前にAGPL-3.0のライセンスチェックが必要
意味のある負荷モデルを書くには本物の専門知識が必要
こんな方におすすめ
レイテンシが重要な失敗モードであるAPI中心のバックエンド
既存の機能スイートにパフォーマンスゲートを追加するチーム
おすすめの理由
「しきい値を終了コードとして扱う」ことは、まさに正しいCIのプリミティブです。
オプションA ― ワークフローファイルなし
パイプラインがすでにデプロイしている場合、これがより短い道筋です。リポジトリには何も追加されません。
デプロイが存在することを確認する。最近のプルリクエストを開き、クリック可能で到達可能なURLとともにデプロイがリストされていることを確認します。デプロイイベントがなければトリガーする対象がなく、これは人々がスキップしがちなステップです。
GitHubをワークスペースに接続する。Workspace Settings → Integrations → GitHub → Connect に進み、リポジトリを所有する組織にアプリをインストールします。アクション、チェック、Issue、メタデータへの読み取りアクセスと、コード、コミットステータス、デプロイ、プルリクエストへの読み書きアクセスを要求します ― 書き込みアクセスにより結果を返信できるようになります。
リポジトリをプロジェクトにリンクする。プロジェクト内でGitHub Actionタブを開き、Connect GitHub Actionをクリックします。
「デプロイ完了」を意味するイベントを選ぶ。最近のプルリクエストのリンクを貼り付け、Detect Eventsをクリックし、URLが稼働した後に発火するイベントを選択します。ビルド開始時に発火するものを選ぶと、まだ立ち上がっていないURLに対してすべてのテストが実行されてしまいます。
対象URLのパターンを設定する。プレースホルダーは
{pr}、{branch}、{branch-slug}、{sha}、{short-sha}です ― たとえばhttps://pr-123.example.comはhttps://pr-{pr}.example.comになります。プッシュトリガーにはパターンは不要で、選択した環境の設定済みURLを使用します。テストイベントを送信してからトリガーを作成する。約30秒後にプルリクエストにコメントが表示されます。保存する前にそのURLを開き、期待通りの環境であることを確認してください。
テストが通過するまでPRをブロックをオンにしてそのチェックを必須にし、ドラフトのプルリクエストもカバーしたい場合はドラフトPRを含めるをオンにしてください。
オプションB ― 自分のワークフローから駆動する
自分で実行を管理したい場合、あるいはそもそもGitHubを使っていない場合は、オープンソースのTestSprite CLIが任意のCIシステムから同じ仕事を行います。インストールは無料でApache-2.0ライセンスであり、必要なのは環境内のAPIキーだけです ― 認証情報ファイルは不要です。
testsprite ci init github
これにより、保守されているTestSprite/testsprite-action@v1に委譲する.github/workflows/testsprite.ymlが足場として生成されます。自分でジョブを書きたい場合は、リリースがコミットなしにパイプラインを変えてしまわないようCLIのバージョンを固定してください。
name: Verify
on: pull_request
jobs:
testsprite:
runs-on: ubuntu-latest
steps:
- uses: actions/checkout@v4
- uses: actions/setup-node@v4
with:
node-version: 22
- name: Install the CLI
run: npm install -g @testsprite/testsprite-cli@0.4.0
- name: Run the suite
env:
TESTSPRITE_API_KEY: ${{ secrets.TESTSPRITE_API_KEY }}
run: |
testsprite test run --all --project prj_abc123 --wait \
--report junit --report-file testsprite-junit.xml \
--summary-file testsprite-summary.json
- name: Keep the report
if: always()
uses: actions/upload-artifact@v4
with:
name: testsprite-results
path: testsprite-*.{xml,json}
この経路では、CLIがGITHUB_ACTIONS=trueを検出し、追加の設定なしに--wait実行に対してアノテーションとジョブサマリーテーブルを出力します。JUnitのサイドカーはCircleCI、GitLab、Jenkins、Azure Pipelinesにネイティブに取り込まれます。
分岐に使う終了コード
これらはコマンドラインの経路に適用され、終了コードがゲートになります。
| Exit | Meaning | What CI should do |
|---|---|---|
0 | すべてのテストが合格 | マージを許可 |
1 | テストが失敗 | ブロック ― 本物のリグレッション |
3 | 認証エラー | ブロックしてアラート ― シークレットが欠落または無効 |
6 | 競合または前提条件の失敗 | 調査 ― しばしば実行中のジョブが原因 |
7 | タイムアウト | 再アタッチのため再実行するか、--timeoutを上げる |
11 | レート制限 | 再試行可能 ― バックオフして再試行 |
12 | クレジット不足 | ブロックして人間にアラート ― 再試行不可 |
13 | 機能制限 | このコマンドには有料プランが必要 |
14 | クライアントが古すぎる | 固定しているCLIバージョンを上げる |
コード129、130、143はシグナル割り込み(128とシグナル番号の合計)であり、ジョブがキャンセルされたことを意味し、テストが失敗したことを意味しません。
グリーンチェックを信頼する前に知っておくべき一つの挙動
古いV2プロジェクトでは、test run --all --projectはプロジェクトのバックエンドテストのみを実行し、フロントエンドテストは静かにスキップされます。フロントエンドのカバレッジ、あるいは複数プロジェクトにまたがるテストをプルリクエストでゲートするには、それらをテストリストにグループ化して代わりにそれを実行してください。
testsprite testlist run tl_xxxxxxxx --wait \
--report junit --report-file testsprite-junit.xml
リスト内の各プロジェクトは--project-env <projectId>:<envName>で特定の環境に固定できるため、一つのゲートがフロントエンドとバックエンドの混在したデプロイをカバーできます。
よくある質問
ワークフローファイルを追加する必要がありますか?
GitHub App経路では不要です ― 連携は完全にTestSprite内で設定され、リポジトリへの変更は必要ありません。自分のワークフローから実行を駆動したい場合は、testsprite ci init githubがそれを足場として生成します。
これは既存のGitHub Actionsワークフローを置き換えますか?
いいえ。GitHub Appはワークフローがすでに生成しているイベントをリッスンするだけであり、パイプラインを変更したり置き換えたりすることはありません。
リポジトリが一度もデプロイを生成しない場合はどうなりますか?
その場合、イベント駆動の経路にはリッスンする対象がありません。パイプラインにデプロイステップを追加するか、ワークフロー内でCLIを使い、自分で解決したURLをプロジェクトに向けてください。
どのホスティングプロバイダーが動作しますか?
GitHubにデプロイを報告し、到達可能なURLを公開する任意のプロバイダーです ― Vercel、AWS Amplify、Netlify、そしてGitHubデプロイを作成するセルフホストパイプラインです。
チェックにマージをブロックさせるにはどうすればよいですか?
トリガーでテストが通過するまでPRをブロックをオンにすると、TestSpriteのチェックが必須になります。CLI経路では、終了コードがジョブを失敗させ、ブランチ保護が残りを処理します。
結果をAIコーディングエージェントに供給できますか?
はい。プルリクエストコメント内の各失敗には、コーディングエージェントに貼り付けるために書かれた修正提案プロンプトが付属します。より完全なループのためには、testsprite setup --agent claudeが検証スキルをインストールし、Claude Code、Cursor、Codex、Cline、Antigravity、Kiro、Windsurf、Copilot がテストを直接作成・実行・トリアージできるようにします。
CIでCLIのバージョンを固定すべきですか?
はい ― latestを追いかけるのではなく@testsprite/testsprite-cli@<version>をインストールしてください。そうすれば、新しいリリースがコミットなしにパイプラインの動作を変えることはありません。
グリーンチェックには意味があるべきです。
パイプラインに組み込む価値のあるツールとは、本物の答えを待ち、壊れた機能と壊れたパイプラインを区別できるツールです。Playwright は自分で実行するテストにとって最も強力な選択肢であり、Lighthouse CI と k6 は機能テストが完全に見落とすリグレッションをカバーします。TestSprite はワークフローファイルを一切必要としない唯一のツールです ― パイプラインがすでに発しているデプロイイベントをリッスンし、プルリクエストにコメントし、テストが失敗したときにマージをブロックできます。コマンドライン経路については、docs.testsprite.comのリファレンスを読み、GitHub上のオープンソースCLIにスターを付けてください。