失敗したプランの実行をトラブルシューティングするのは時間がかかることがあり、大規模なテストでは個々のテスト実行を確認する作業が特に手間になります。この負担を軽減するために、プラン向けのオートテスト失敗分析(オートTFA)を導入しました。
オートTFAを使うと、プランが失敗した理由をすばやく把握でき、課題のトラブルシューティングにかかる時間を短縮できます。
オートTFAは、高度なAIアドオンの一部としてご利用いただけます。詳細については、カスタマーサクセスマネージャーまでお問い合わせください。
仕組み
失敗したプランの実行結果ページを開くと、mablは出力を大規模言語モデルに送信します。モデルは、どのテストが失敗したかと、その理由の分析結果を返します。
分析を展開して、プランが失敗した理由や今後の対応策など、詳細を確認してください。
- 分析を再生成 - 再生成をクリックすると、モデルが失敗を再分析し、新しい分析結果を提供します。
- フィードバックを送信 - サムズアップとサムズダウンのアイコンを使って、失敗分析の品質についてご意見をお聞かせください。
失敗分析を生成するために、mablは次のプラン実行出力データをモデルに送信します。
- プラン名と説明、最終更新日時、および最後に更新したユーザー
- プランの実行情報(ステータス、トリガー方法、実行時間を含む)
- プランの内容には、ステージとテストの順序付きリストが含まれます。
- プラン実行中に失敗したテストに対するAI生成の失敗分析とテスト失敗の理由
2025年6月16日以前に実行されたテストについては、テスト失敗分析が自動的に生成されていません。この日付より前のプラン実行を表示する場合、プラン実行内の失敗したテストは最大10件までしか分析されません。
オートTFAについて詳しく知りたい方は、ドキュメントをご覧ください。