SaaSアプリケーションのテスト方法:品質保証の完全ガイド

Yunhao Jiao
SaaSアプリケーションのテスト方法:品質保証の完全ガイド カバー

SaaSアプリケーションには、シングルテナントまたは社内向けソフトウェアとは異なる固有のテスト対象領域があります。マルチテナンシー、サブスクリプション課金、ロールベースのアクセス制御、APIレート制限、Webhookの配信、サードパーティ連携は、汎用ガイドでは十分にカバーされないテスト要件を生み出します。

このガイドでは、SaaSアプリケーションを徹底的にテストするために必要なこと——固有のアーキテクチャ上の懸念事項から、プロダクトがスケールしても品質を一定に保つ実践的なCI/CDのセットアップまで——を解説します。

SaaSテストが異なる理由

マルチテナント分離

SaaSの本質的な特性は、複数の顧客が同一のインフラを共有することです。これにより、シングルテナントソフトウェアには存在しないテスト要件が生まれます:テナント分離を徹底的に検証しなければなりません。

テナント分離のバグはSaaSにおいて最も深刻な部類に入ります。ユーザーAがユーザーBのデータを閲覧できる、組織Aの設定が組織Bの動作に影響する、課金データがアカウント間でリークする、といった問題です。これらのバグは単一ユーザーフローを単独でテストしても発見できません——クロステナントアクセスを明示的にテストする必要があります。

実行すべきコア分離テスト:

  • 組織Aのユーザーが、いかなるAPIエンドポイントを通じても組織Bに属するリソースにアクセスできないこと
  • 組織Aの管理者が組織Bの管理機能にアクセスできないこと
  • 組織Aのユーザーを削除しても組織Bに影響がないこと
  • 組織レベルの設定がその組織内にのみ適用されること
  • 組織Aの課金イベントが組織Bのレコードに表示されないこと

TestSpriteは、認可要件からクロステナント分離テストを生成します。PRDにリソースが組織にスコープされると記載されている場合、TestSpriteは明白なエンドポイントだけでなく、すべてのエンドポイントがそのスコープを適用していることを検証します。

ロールベースアクセス制御(RBAC)

SaaS製品には通常、オーナー、管理者、メンバー、閲覧者、請求担当者など複数のユーザーロールが存在します。各ロールは機能ごとに異なる権限を持っており、RBACのテストマトリクスは膨大で、ほぼ常に十分にテストされていません。

アプローチ:各ロールにテストユーザーを作成し、それぞれのロールが実行すべきアクションを実行できること、および実行すべきでないアクションを実行できないことを検証します。これは体系的な作業ですが、複雑ではありません。課題は技術的な深さではなく、カバレッジの広さにあります。

TestSpriteの認可マトリクステストは、RBACの要件に基づき、ロール × 機能 × 操作の完全なマトリクスをカバーするテストを自動生成します。

サブスクリプションと請求ロジック

請求ロジックはリスクが高く、テストが不十分になりがちです。SaaSにおける請求関連の典型的なバグを以下に示します。

  • 無料プランの上限が適用されない(ユーザーがブロックや課金なしにクォータを超過する)
  • プランのアップグレードが機能アクセスに即座に反映されない
  • ダウングレード後も、下位プランでロックされるべき機能が制限されない
  • トライアル期限切れが正しく処理されない(トライアル終了後も機能にアクセスできる)
  • 使用量ベースの請求がエッジケース(上限ちょうど、上限を1超過)で正しく計算されない

ステート遷移を明示的にテストしましょう:無料 → トライアル → 有料 → キャンセル → 再有効化。各遷移で正しい機能アクセス状態が実現されることを確認します。

APIレート制限

SaaSのAPIにはほぼ必ずレート制限があります。以下の点をテストしてください。

  • レート制限が適用されている(制限を超えたリクエストが429を返す)
  • レート制限ヘッダーが存在し、正確な値が含まれている(X-RateLimit-Remaining、X-RateLimit-Reset)
  • ウィンドウの期限切れ後にレート制限が正しくリセットされる
  • ドキュメントどおり、サブスクリプションのプランによって異なるレート制限が設定されている
  • レート制限がグローバルではなくテナントごとに適用されている(あるテナントが上限に達しても他のテナントに影響しない)

Webhookの配信と信頼性

SaaS製品は通常、サブスクリプション作成、支払い失敗、ユーザー招待など、重要なイベントに対してWebhookを発行します。Webhookのテストはよく省略されがちですが、顧客側の統合障害の原因として頻繁に挙げられます。

各Webhookイベントタイプについて以下をテストしてください。

  • トリガーとなるイベント発生時に、正しいペイロードでWebhookが発火する
  • Webhookのペイロードがドキュメントに記載されたスキーマと一致する
  • 配信失敗時(受信エンドポイントからの4xx、5xx)にWebhookが再試行される
  • Webhookの署名検証が機能する(HMACシグネチャが正しい)
  • 連続したイベントに対してWebhookの配信順序が正しい

SaaSテストスタック

認証とセッションのテスト

SaaSアプリケーションは通常、メール/パスワード、SSO/SAML、OAuth(Google、GitHub)、マジックリンクなど複数の認証方式をサポートしています。各パスを明示的にテストする必要があります。

  • 各認証方式で正常に認証でき、有効なセッションが作成される
  • SSOが組織レベルの制限を適用する(組織Aのユーザーが組織BのSSOを使用できない)
  • セッショントークンが正しく期限切れになり、期限切れ後に再利用できない
  • 同時セッションの動作がポリシーと一致する

オンボーディングフローのテスト

SaaSのオンボーディングフローは価値が高い一方で、頻繁に壊れます。オンボーディングを完了できない新規ユーザーは、そのまま失注につながります。オンボーディングの全シーケンスをテストしましょう。

  • メール/パスワード、Google OAuth、GitHub OAuthでのサインアップ
  • メール認証(再送フローを含む)
  • 組織の作成(または招待ユーザーの場合は招待の承諾)
  • 初期セットアップ手順(ワークスペースの設定、最初のリソース作成、チームメートの招待)
  • オンボーディングの完了と正しい状態への遷移

オンボーディングフローは最優先のE2Eテストカバレッジに含め、すべてのPRで実行する必要があります。

データエクスポートとGDPRコンプライアンス

SaaS製品は、特定の機能のテスト可能性を求めるデータ規制の対象となります。

  • ユーザーが標準フォーマットですべてのデータをエクスポートできること
  • ユーザーがアカウント削除をリクエストできること
  • 削除されたアカウントのデータが実際に削除されていること(単に非表示になっているのではなく)
  • データ保持ポリシーが正しく適用されていること

これらは低頻度の操作ですが、コンプライアンス上の重要度は非常に高い要件です。明示的にテストしてください。

SaaSテストのCI/CD

SaaSテストのCI/CDセットアップは、プレビューデプロイメントに対してすべてのPRで実行する必要があります。

ファストゲート(5分以内):

  • スモークテスト:新規ユーザーがサインアップしてコア機能にアクセスできるか?
  • 認証テスト:ログイン、ログアウト、セッション有効期限
  • 重要なRBAC:コア操作における管理者とメンバーの権限

フルゲート(15分以内):

  • 完全なオンボーディングフロー
  • 各サブスクリプションティアのコアプロダクトフロー
  • テナント分離テスト(クロステナントアクセスチェックのサンプル)
  • コアイベントのWebhook送信
  • APIレート制限の検証

TestSpriteのエージェント型テストは、SaaS製品の要件からこれらすべてのカバレッジを自動生成します。GitHubインテグレーションを通じてプレビューデプロイメントに接続すると、すべてのPRがSaaS特有のテストマトリクス全体に対して自動的に検証されます。

SaaSテストで見落とされがちな盲点

課金のハッピーパスのみをテストすること。トライアル期限切れ、プランのダウングレード、支払い失敗のパスは、最も重大なバグが潜む場所であり、手動テストではほぼ確実に見逃されます。

テナント分離を明示的にテストしないこと。チームはユーザーAがユーザーAのデータにアクセスできることはテストします。しかし、すべてのエンドポイントにおいてユーザーAがユーザーBのデータにアクセスできないことを明示的にテストすることはほとんどありません。

Webhookテストを完全にスキップすること。WebhookはDev環境では動作しても、HMACシグネチャの不一致やスキーマのずれにより、本番環境でサイレントに失敗することがあります。独自のテストカバレッジが必要です。

認証が機能しているから認可も機能していると思い込むこと。認証と認可は別物です。ログインが機能することを検証するテストは、ビューアーロールのユーザーが誤って管理者操作を実行できるかどうかについては何も示しません。

TestSpriteでSaaS特有のテストを設定する →