- スタート アップ ガイド
- プロジェクト管理
- ドキュメント
- 変更影響分析を使用する
- Test Cloud のアクセシビリティ テスト
- プロジェクトの運用とユーティリティ
- Test Manager の設定
- ALM ツールとの連携
- API 連携
- テスト用のエージェントのコーディング
- トラブルシューティング
パフォーマンス テストの結果のダッシュボード。グループのステータス、SLO の遵守、HTTP とオートメーションのエラー、応答時間のしきい値、インフラストラクチャの使用状況のメトリックが含まれます。
ダッシュボードには、アプリケーションやインフラストラクチャが期待されるパフォーマンス レベルを満たしているかどうかを判断するのに役立つ複数のグラフとステータス インジケーターが表示されます。
- [ユーザー] グラフには、アクティブな仮想ユーザー数の経時的推移が表示され、オートメーションのエラー、応答時間、
HTTPエラーなどの主要なメトリックも表示されます。これにより、たとえば、負荷が高いとエラーが増加したり応答時間が遅くなったりする場合の相関関係をすばやく特定できます。 - [インフラストラクチャ] グラフ: 負荷を実行するロボット (サーバーレスの負荷ジェネレーターやオンプレミス マシン) の CPU とメモリの消費量が表示されます。これらのメトリックを監視すると、パフォーマンスの問題がロボット インフラストラクチャの過負荷が原因で発生したのではなく、負荷がかかっているシステムが原因で発生したことを確認できます。
- グループ カード: 各グループ カードには、負荷グループの実行ステータスと主要なメトリックの概要が表示されます。
- グループ名およびテスト ケース名。グループ名は変更できません。
- ステータス (結果なし、成功または失敗)。ステータスは、しきい値への準拠に基づいて自動的に決定されますが、 手動で調整することもできます。これにより、テスト所有者は、軽微な違反にもかかわらずグループを成功と見なすべきだと判断した場合や、ビジネスに致命的な期待に応えられなかった場合に失敗としてマークすべきだと考える場合に、結果を上書きできます。
- 実行された仮想ユーザーの数。このメトリックには、グループの実行が完全に完了した後にバー全体が表示されます。
- エラー率 (
HTTPおよびオートメーションのエラー) - 平均応答時間と最大応答時間。
HTTP エラーとオートメーション エラーを表示するには、以下の手順を実行します。
- 実行を開き、[ユーザー] グラフまたは [インフラストラクチャ] グラフから対象のビューを選択します。
- 対象のビュー ([HTTP エラー] または [オートメーション エラー]) で選択を行います。
- [Web トラフィック] セクションと [オートメーション エラー] セクションでエラーを確認します。
ダッシュボード ビューは、グループが定義済みのサービス レベル目標 (SLO) を達成したかどうかを素早く評価するのに役立ちます。さらに掘り下げて分析する場合は、グループ メトリック ビューを開くことができます。このビューには、応答時間、エラー率、ステップの実行時間、インフラストラクチャの使用状況に関する詳細なグラフが表示されます。
詳細ビューでは、パフォーマンス テスト中に発生した特定のイベントに対する詳細な洞察が得られます。
- 時間枠とグラフの選択 詳細ビューを開くには、まずヒストグラムで時間範囲を選択してから、特定のグラフ (HTTP 応答時間、エラーなど) を選択します。詳細ビューには、選択した時間枠に関連するエントリが表示されます。
- HTTP 要求/応答のペア この表には、ロード グループによって実行されたすべての HTTP 要求が、名前、種類、応答時間、状態コードなどと共に一覧表示されます。
- 要求は、エラー コード (404、500 など) を返す場合にエラーとしてフラグが付けられます。
- 要求が有効なコード (200 など) を返しても、応答時間のしきい値を超えている場合も、ここに報告されます。各エントリの前にある数字は、問題が発生した回数を示します。
- オートメーションのエラー: 同じ詳細ビューを使用して、セレクターの失敗やアクティビティの例外などのオートメーション レベルのエラーを表示することもできます。これにより、負荷がかかった状態で発生する可能性のある機能上の問題を可視化できます。
詳細ビューでは、エラー コード、しきい値違反、オートメーション ログを組み合わせて、テスト シナリオのパフォーマンスや機能の失敗の根本原因を突き止めることができます。
ロボット ログ
Robot logs are viewable and filterable, by load group and by severity, directly inside this results screen, alongside application logs. Previously, robot logs required switching to Orchestrator.
Persona-based performance reports
Every performance test run generates a persona-based report that translates dashboard charts and SLO tables into a plain-language answer to "what do I do next?" Four views are available, one per audience:
- Program Manager — Release Readiness: a per-load-group verdict (Do not release or Production ready) based on SLO compliance. Answers: is this ready to ship?
- Developer — Developer View: error rate and response-time detail per group, plus a best-effort root-cause hint. Answers: what's broken?
- InfraOps — Infrastructure View: peak CPU and memory usage per group. Answers: is this an infrastructure problem?
- QA/Tester — QA/Tester View: which load groups need a full re-test versus no re-test needed after a fix. Answers: what needs to be retested?
結果
パフォーマンスの実行結果がグループ カード、グラフ、エラーの内訳とともにダッシュボードに表示されます。詳細ビューに、選択した期間の HTTP 要求と応答のペアおよびオートメーション エラーが表示され、失敗の根本原因を特定できます。