ペアワイズ法テストケース生成ツール「PictMaster」のカバレッジ指定を使う

前回はペアワイズ法テストケース生成ツール「PictMaster」の”無効値”機能について紹介しました。
今回はPictMasterの”カバレッジ指定”機能について紹介したいと思います。

テスト対象の因子の数が多く、因子間の影響が２因子間に限定できない場合には、因子の組み合わせ数を２よりも大きくしたいケースがあります。
２因子網羅のテストケースを効率よく生成するペアワイズ法ですが、２よりも大きい組み合わせ数を指定してテストケースを生成するとテストケース数があっという間に増大してしまいます。

以下の例で考えてみましょう。

因子が a, b, c, d, e の５個で、それぞれが２水準の値を持っている場合を想定します。
２因子間網羅のテストケースは以下のようになりました。
テストケース数は合計７個でした。

「環境設定」にて、組み合わせるパラメータ数を「３」に変更します。

３因子間網羅のテスケースは以下のようになりました。
テストケース数は合計１３個でした。

２因子網羅に対して３因子網羅の場合はテストケース数がほぼ倍になっています。

因子・水準が多くなる場合は更にテストケース数が増えてしまいます。上記の因子のそれぞれの水準が３個の場合、４因子網羅のテストケースを生成するとテストケース数は１００個にもなります。

組み合わせ数を増やしつつ、テストケース数の増大を抑える方法をご紹介します。

因子が a, b, c, d, e の５個で、それぞれが２水準の値を持っている場合を想定します。

全体のテストケースの中で３因子間網羅のテストケースを８０％とし、残りは２因子網羅でよい場合のテストケースを生成してみましょう。
「環境設定」にて次のように設定します。

• 組み合わせるパラメータ数：２
• ペアワイズ法：「カバレッジを指定して生成」を選択
  • 3-wayカバレッジ： ８０％
  • 繰り返し回数： ８

生成されたテストケース数は合計８個になりました。

３因子網羅１００％のテストケースを生成した場合では全テストケース数は１３個でした。
今回３因子網羅のカバレッジを８０％にしたことでテストケースが５個削減されています。

このように２因子網羅を確保した上で、３因子網羅を８０％確保しつつ、テストケース数を大幅に削減することができました。

「組み合わせるパラメータ数」はいくつまで指定できるのかを確認しました。
PictMasterでは１～４まで指定可能でした。
「環境設定」にて「組み合わせるパラメータ数」に値を設定すると「ペアワイズ法」の「x-wayカバレッジ」の項目の「x」の数値が自動的に変更されました。

例えば「組み合わせるパラメータ数」を「４」に設定した場合、x-wayカバレッジの「x」は組み合わせるパラメータ数にプラス１した「５」に自動的に変更されました。

「カバレッジ指定」機能を使うことによって、組み合わせ数を増やしつつ、テストケース数の増大を抑えることができました。
PICTには他にも色々なオプションが用意されていて、PictMasterから利用可能です。
次回も別のオプションを紹介していきたいと思います。

ソフトウェアテストに関する技法やテクニックをまとめています。

テストに活用していただければ幸いです。