複数条件の組み合わせによるテストケース数爆発と戦うPairwise(ペアワイズ)法とそれを支えるツール「PICT」 | DevelopersIO

ペアワイズ法を使うことで、効率的にテストケースを絞り込めることがわかったかと思います。 --- 2019/10/31 追記 --- どうしてテストケースを絞り込んでも大丈夫なのか？という意見がSNSやはてブのコメントで見受けられたので、フォローアップエントリを書きました。こちらも合わせてご覧ください。 ペアワイズ法は本当に有効なのか？組み合わせテスト技法と上手に付き合う方法 ｜ DevelopersIO ペアワイズ法を支えるツール「PICT」 ペアワイズ法が有効なことはわかりましたが、この組み合わせをどうやって作れば良いでしょうか？条件の数が少なければ前述のように手作業でもやれないことはありませんが、現実の問題はもっと複雑ですので、到底無理でしょう。 そこで役に立つのが、ペアワイズ法のテストケースを生成してくれるツール「PICT」です。 microsoft/pict: Pairwise I

[masaru_b_cl]

頑張って書いた

[DecoyMaker]

2因子でほとんどの障害が見つかる、に関する論文はこれだったと思う https://ieeexplore.ieee.org/abstract/document/1321063

[hyperash]

なぜ端折れるのかを納得する・してもらうのが結構面倒なのと、これだけに頼ってて端折ったパターンで後々バグが出ると最悪なので、前提としてモジュールレベルでは全網羅の自動テストを通して安心しておきたいです。

[monmon225197810]

実験計画法の中の直交表という概念に対して、ソフトウェアのバグは2つの因子の組み合わせでほとんど発生しているという経験則を加えたのがペアワイズ（オールペア）法って感じかな。実験計画はもう少し広い概念。

[chess-news]

実験計画法とちがうのかな？

[t-wada]

総当たりにすると条件（因子と水準）の組み合わせが膨大になってしまうテストケースを効果的に（しばしば圧倒的に）削減するペアワイズ法と、最も有名なテストケース生成ツール PICT の説明

[GARAPON]

複数条件網羅するケースを作り出すコードを書いて全件テストするアプローチのほうが俺は好き

[n_231]

このペアワイズ法が採用できるのは、3以上の要因での条件分岐が存在しない(このテストで無視できる)ことが前提となりそう。そして結局は何のテストなのか次第。

[htnmiki]

自動改札機の組み合わせ爆発はどっかで見たなと思った　https://www.publickey1.jp/blog/12/_1040.html

[ko-ya-ma]

直交表全部を網羅するテストを書かなくても2要素のテストで7割のバグは潰せるよっていう例のアレ。PICTを使用している

[sabacurry]

われわれは雰囲気でテストしている(のをやめたい)

[MzdA0w73tg]

ディシジョンテーブルだと網羅できるから安心できるんだけど、量が爆発するのよね。PICT良さそう。

[yarumato]

“単純に全ての条件の組み合わせを網羅すると2*2*2*2*3=48ケース。組合せ爆発を抑えるPairwise(AllPair)で4通りに絞り込めた。Pairwiseの組み合わせを作るツール「PICT」。PICTを使ってテストケース生成の例”

[takets]

ペアワイズ法（オールペア）を出力するツールの紹介。便利

[miholovesq]

PICT忘れてた

[Falky]

なにもわからん

[Rinta]

ツールが便利なのはわかった。あとはペアワイズ法がどんな理屈で組み合わせの中から「無駄」を排除するのかを分からないとエライ人を説得できないな。

[honma200]

使わなくなったのは多分 1.爆発するような組み合わせが無かったか、2. 全数組み合わせ検査しないと心配って品質部門が判断したか、3. 自動テストで全組み合わせテストできるからとかでしょうねー

[hirorinya]

すごい！ただ、これで問題ないって上の人に理解してもらうのに、削減されたテスト工数以上の労力がかかる。っz

[rizmhate]

PICT、うっすら10年くらい前に使った記憶が

[ilyaletre]

PICTしばらく使ってた記憶が。。。なんで運用に乗らなかったんだっけ。。。