SaaSアプリケーションのテスト方法:品質の完全ガイド

Yunhao Jiao
SaaSアプリケーションのテスト方法:品質の完全ガイド カバー画像

SaaSアプリケーションは、シングルテナントや社内向けソフトウェアとは異なる、固有のテスト対象を持っています。マルチテナンシー、サブスクリプション課金、ロールベースのアクセス制御、APIレート制限、Webhookの配信、サードパーティ統合などは、汎用的なガイドでは十分に対応しきれないテスト要件を生み出します。

このガイドでは、SaaSアプリケーションを徹底的にテストするために必要なこと、すなわち固有のアーキテクチャ上の懸念事項から、プロダクトのスケールに合わせて品質を一貫して維持するための実践的なCI/CDの設定までを解説します。

SaaSテストが異なる理由

マルチテナントの分離

SaaSの本質的な特徴は、複数の顧客が同じインフラを共有することです。これにより、シングルテナントのソフトウェアには存在しないテスト要件が生まれます。テナントの分離を徹底的に検証しなければなりません。

テナント分離のバグはSaaSにおいて最も深刻な問題の一つです。ユーザーAがユーザーBのデータを閲覧できる、組織Aの設定が組織Bの動作に影響する、課金データがアカウント間で漏洩するといった問題が挙げられます。これらのバグは単一ユーザーのフローを個別にテストするだけでは発見できません。クロステナントのアクセスを明示的にテストする必要があります。

実施すべき主要な分離テスト:

  • 組織Aのユーザーは、すべてのAPIエンドポイントを通じて組織Bに属するいかなるリソースにもアクセスできない
  • 組織Aの管理者は組織Bの管理者機能にアクセスできない
  • 組織Aのユーザーを削除しても組織Bに影響しない
  • 組織レベルの設定は、その組織内にのみ適用されます
  • 組織Aの請求イベントは、組織Bの記録には表示されません

TestSpriteは、認可要件からクロステナント分離テストを自動生成します。PRDでリソースが組織にスコープされると指定されている場合、TestSpriteはすべてのエンドポイントがそのスコープを強制していることを検証します — 明白なものだけでなく、すべてのエンドポイントを対象に。

ロールベースアクセス制御(RBAC)

SaaS製品には通常、オーナー、管理者、メンバー、閲覧者、請求担当者など複数のユーザーロールがあります。各ロールは機能ごとに異なる権限を持ちます。RBACのテストマトリクスは膨大であり、ほぼ常にテストカバレッジが不完全です。

アプローチ:各ロールにテストユーザーを作成し、それぞれのロールが実行すべきアクションを実行できること、および実行すべきでないアクションを実行できないことを検証します。これは体系的ではありますが、複雑ではありません — 課題は技術的な深さではなく、カバレッジの広さにあります。

TestSpriteの認可マトリクステストは、RBAC要件からこのカバレッジを自動生成し、ロール × 機能 × 操作の完全なマトリクスを網羅します。

サブスクリプションと請求ロジック

請求ロジックはリスクが高く、テストが不十分になりがちです。SaaSにおける一般的な請求バグ:

  • 無料プランの制限が適用されない(ユーザーがブロックや課金なしにクォータを超過する)
  • プランのアップグレードが機能アクセスに即座に反映されない
  • ダウングレード後も、下位プランではロックされるべき機能が制限されない
  • トライアル終了が正しく処理されない(トライアル終了後も機能にアクセスできる)
  • 使用量ベースの請求がエッジケース(制限ちょうど、制限を1つ超えた場合など)で誤って計算される

請求状態のトランジションを明示的にテストしてください:無料 → トライアル → 有料 → キャンセル → 再アクティベーション。各トランジションで正しい機能アクセス状態が得られることを確認します。

APIレート制限

SaaS APIにはほぼ常にレート制限があります。以下をテストしてください:

  • レート制限が適用されている(制限を超えたリクエストが429を返す)
  • レート制限ヘッダーが存在し、正確である(X-RateLimit-Remaining、X-RateLimit-Reset)
  • ウィンドウが期限切れになった後、レート制限が正しくリセットされる
  • ドキュメントに記載のとおり、サブスクリプションティアごとに異なるレート制限が設定されている
  • レート制限はグローバルではなくテナントごとに適用される(あるテナントが制限に達しても、他のテナントに影響しない)

Webhook配信と信頼性

SaaS製品は通常、サブスクリプション作成、支払い失敗、ユーザー招待などの重要なイベントに対してWebhookを発行します。Webhookのテストは一般的に省略されがちですが、顧客との統合障害の原因となることが多いです。

各Webhookイベントタイプについてテストしてください:

  • トリガーイベント発生時に、正しいペイロードでWebhookが発火する
  • Webhookペイロードがドキュメントに記載されたスキーマと一致する
  • 配信失敗時(受信エンドポイントからの4xx、5xx)にWebhookがリトライされる
  • Webhookシグネチャ検証が機能する(HMACシグネチャが正しい)
  • 連続するイベントにおけるWebhook配信順序が正しい

SaaSテストスタック

認証とセッションのテスト

SaaSアプリケーションは通常、メール/パスワード、SSO/SAML、OAuth(Google、GitHub)、マジックリンクなど複数の認証方式をサポートします。各パスに対して明示的なテストが必要です:

  • 各認証方式で正常に認証が行われ、有効なセッションが作成される
  • SSOが組織レベルの制限を適用する(組織Aのユーザーが組織BのSSOを使用できない)
  • セッショントークンが正しく期限切れになり、期限切れ後に再利用できない
  • 同時セッションの動作がポリシーと一致する

オンボーディングフローのテスト

SaaSのオンボーディングフローは重要性が高く、しばしば不具合が発生します。オンボーディングを完了できない新規ユーザーは、失った顧客となります。完全なオンボーディングシーケンスをテストしてください:

  • メール/パスワード、Google OAuth、GitHub OAuthによるサインアップ
  • メール認証(再送フローを含む)
  • 組織の作成(または招待ユーザーによる招待の承認)
  • 初期セットアップ手順(ワークスペースの設定、最初のリソース作成、チームメンバーの招待)
  • オンボーディングの完了と正しい状態へのランディング

オンボーディングフローは最優先のE2Eテストカバレッジに含め、すべてのPRで実行する必要があります。

データエクスポートとGDPRコンプライアンス

SaaS製品は、特定の機能のテスト可能性を要求するデータ規制の対象となります:

  • ユーザーはすべてのデータを標準フォーマットでエクスポートできる
  • ユーザーはアカウント削除をリクエストできる
  • 削除されたアカウントのデータは実際に削除される(単に非表示になるのではなく)
  • データ保持ポリシーが正しく適用される

これらは低頻度の操作ですが、コンプライアンス上の重要な要件です。明示的にテストしてください。

SaaSテストのCI/CD

SaaSテストのCI/CDセットアップは、プレビューデプロイメントに対してすべてのPRで実行する必要があります:

ファストゲート(5分以内):

  • スモークテスト:新規ユーザーがサインアップしてコア機能にアクセスできるか?
  • 認証テスト:ログイン、ログアウト、セッション期限切れ
  • 重要なRBAC:コア操作における管理者とメンバーの権限確認

フルゲート(15分以内):

  • 完全なオンボーディングフロー
  • 各サブスクリプションティアのコアプロダクトフロー
  • テナント分離テスト(クロステナントアクセスチェックのサンプル)
  • コアイベントのWebhook送信
  • APIレート制限の検証

TestSpriteのエージェント型テストは、SaaS製品の要件からこれらすべてのカバレッジを自動生成します。GitHub連携を通じてプレビューデプロイメントに接続することで、すべてのPRがSaaS固有のテストマトリクス全体に対して自動的に検証されます。

SaaSテストで見落とされがちなポイント

課金のハッピーパスのみをテストしている。トライアル期限切れ、プランのダウングレード、支払い失敗のパスこそが最も影響の大きいバグが潜む場所であり、手動テストがほとんど行き届かない領域です。

テナント分離を明示的にテストしていない。チームはユーザーAがユーザーAのデータにアクセスできることをテストします。しかし、ユーザーAがすべてのエンドポイントにわたってユーザーBのデータにアクセスできないことを明示的にテストすることはほとんどありません。

Webhookテストを完全にスキップしている。Webhookは開発環境では動作しても、HMACシグネチャの不一致やスキーマのずれにより、本番環境でサイレントに失敗することがあります。Webhookには専用のテストカバレッジが必要です。

認証が機能しているからRBACも機能していると思い込んでいる。認証と認可は別物です。ログインが機能することを確認するテストは、ビューアーロールのユーザーが誤って管理者操作を実行できるかどうかについては何も保証しません。

TestSpriteでSaaS固有のテストを設定する →