ブラウザ、モバイル、APIテストにおける結果分析が一般提供開始となりましたことをお知らせします！
失敗したテストのトラブルシューティングには時間がかかります。結果分析を使用することで、失敗の原因を素早く把握し、パターンや傾向を特定して、バグの特定と解決にかかる全体的な時間を短縮できます。
仕組み
失敗したテスト実行のテスト出力を開くと、mablはその出力を大規模言語モデルに送信して分析を行い、テストが失敗した理由を簡潔に説明した結果を返します。
失敗分析は紫色のボックスに表示されます
テストが失敗した理由の詳細やフォローアップアクションを表示するには、サマリーを展開してください。
- 失敗の理由を割り当てる - 失敗したテスト実行に一貫して正確に適用することで、テスト失敗の理由は、チームが全体的なアプリケーションの品質を理解し、レビューにかかる時間を節約するのに役立ちます。
- 失敗分析を再生成する - 再生成をクリックすると、モデルが失敗を再分析し、新しい要約を提供します。
- フィードバックを送る - サムズアップおよびサムズダウンのアイコンを使用して、失敗分析の品質に関するフィードバックをお寄せください。
展開された失敗分析
EA以降の変更点
8月に結果分析を導入して以来、以下の機能強化を行いました。
- APIテストを含めるためのサポートを拡張しました
- 日本語での失敗分析のサポートを追加しました
- 提案された失敗カテゴリの精度を向上させました
- ネットワークの問題については、ネットワークログが含まれており、サマリーの深さを向上させます。
- 失敗分析がポップオーバー要素としてではなく、テスト出力とインラインで表示されるように更新しました。
詳細情報
mablがテストの失敗分析の生成に使用するテスト出力データの詳細については、ドキュメントをご覧ください。