禁則は回避しないとテストできないのだ

カップスターのギザギザはうそ。

==

さてさて、禁則って実際考慮しないとどうなるんだろうか。

サーバーのポート番号/暗号化の指定について考えてみる。わかりやすくするためチェックボックスだけに注目すると、

1. POP over SSLのチェックボックス


2. SMTP over SSLのチェックボックス


3. POPにおけるSSL2.0のチェックボックス


4. POPにおけるSTARTTLSのチェックボックス


5. SSL接続で、証明書の検証をしないチェックボックス


6. SMTPにおけるSSL2.0のチェックボックス


7. SMTPにおけるSTARTTLSのチェックボックス

2水準因子が7個でちょうどL8直交表が使えるので、素直に割り付けてみる。そうすると、

このように禁則によってテストケース2,3,4,5,6はありえない条件となってしまう。すなわち、このままの状態でテストを実施しても組合せ網羅率は上がらないのだ。HAYST法はこの禁則回避について言及しており、その打開策として、

相互排他因子融合手法

多層化手法

可変因子手法

詳しくはこの教科書に載っているが、今後ここで解説していければいいな。

禁則を勉強して、実践へ その６

今日はフェデラー決勝戦の再放送だ！！

==

禁則を勉強して、実践へ　その１
禁則を勉強して、実践へ　その２
禁則を勉強して、実践へ　その３
禁則を勉強して、実践へ　その４
禁則を勉強して、実践へ　その５
の続き。

メールサーバーの設定には下位に2つの設定パネルがある。まずは、メールサーバー - 詳細。

まずは、サーバーのポート番号/暗号化の指定なのだが、さっきよりも禁則が複雑。

POP over SSLまたはSMTP over SSLがONの場合、証明書の検証をしないをONにできるので、このような5つの禁則マトリクスができると思われる。

割付はまた今度ということで。

禁則を勉強して、実践へ その５

勉強会が終わりました。これからは自分勉強へ。

==

禁則を勉強して、実践へ　その１
禁則を勉強して、実践へ　その２
禁則を勉強して、実践へ　その３
禁則を勉強して、実践へ　その４
の続き。

サーバにメールを残すかどうかの設定が禁則になっていた。禁則グラフから、この3因子をまとめて、「サーバに残す-一定期間で削除-5日後」「サーバに残す-一定期間で削除-0日後」「サーバに残す-一定期間で削除-30日後」「サーバに残す-一定期間で削除しない」の4水準とみなす。この因子を割り付けたあとに、分解して3因子にすればよい。ということは、

最終的にはこのようなマトリクスとなる。

禁則を勉強して、実践へ その４

禁則を勉強して、実践へ　その１
禁則を勉強して、実践へ　その２
禁則を勉強して、実践へ　その３
の続き。

途中まで作ってみた。まずは直交表を変形してみて、

これに禁則以外を割り付ける。

禁則分の割付はまた今度。

禁則を勉強して、実践へ その３

久しぶりの更新。明日の朝は雨かあ。

==

禁則を勉強して、実践へ　その１
禁則を勉強して、実践へ　その２
の続き。

前回2因子間網羅率が56%になってしまって、どうしたもんかと悩んでいましたが、コメントにもあるとおり、指標としては「抽象化した状態での網羅率」を意識すれば十分であるとのこと。「ソフトウェアテストHAYST法入門」にも書いてありました。

なので総当り表を書き換えてみるとこんな具合。

次は、メールサーバーの設定について考えてみる。

送信メールサーバーはテキスト入力なので、正常系（＝smtp.nifmail.jp）、正常エラー系（＝存在しないドメイン名、smtp.softest.jpとか）、空欄として3水準としよう。受信メールサーバーも同様に正常系（＝pop.nifmail.jp）、正常エラー系（＝存在しないドメイン名、pop.softest.jpとか）、空欄の3水準。メールアカウントは「softest@nifmail.jp」「softest@gmail.com（ドメイン名と異なるメールアドレス）」「softest@softest.jp（存在しないメールアドレス）」「空欄」の4水準。パスワードは「正しいパスワード」「間違ったパスワード」「空欄」の3水準。パスワードを保存するチェックボックスは「ON」「OFF」の2水準。

さあ、やっとこさ禁則の登場。

受信したメールをサーバ上に残すをONにすると、一定期間置いてから削除するを選択でき、それをONにすると、X日後の値を設定できる。これは禁則グラフ・禁則マトリックスを使ってみよう。禁則とは何かというと、「ありえない水準の組合せ」といっていい。この考慮は非常に重要で、複雑なシステムにHAYST法を適用しようとする場合、この禁則の考慮がされないと、まったくテストができなくなることがある。

禁則グラフを作ってみると、最後の日数を指定する因子については若干網羅率・出現率が低下するだろう。

割付については次回へ。もう眠たいので。

禁則を勉強して、実践へ その２

台風きてて、興奮気味。

==

禁則を勉強して、実践へ　その１
の続き。

直交表はL16にしましょうか。3つの4水準を多水準化してみる。

ぱぱ～とここまで割り付けちゃいました。ちなみに、イタリック体はダミー水準です。でも、これって8水準あった「アイコン」因子を抽象化してるので、2因子間網羅率が激下がり。。。どのくらい低下したかというと、、、

あーれま。56%になっちゃった。さてさて、どうしたもんかねえ。

禁則を勉強して、実践へ その１

第3回勉強会、おそらくはHAYST法を実践する上で肝となる禁則の回でした。

==

自分の業務に近いケースを考えてみようかな。その１として、僕の使っているメールソフト「秀丸メール」。

業務で秀丸エディタを使ってるので、僕はこれを愛用。その中で、けっこう禁則がありそうな「アカウントの設定」について、考えてみる。

大きく分類すると

1. 個人情報


2. メールサーバー


3. メールの振り分け


4. 上級者向け

の4つに分けられる。まずは、個人情報から攻めるぞ。

因子としては、

アカウント名

アイコン

名前

メールアドレス

が考えられる。んで、それぞれの水準選定をしてみよう。アカウント名はごく普通のアカウント名をあらわす訳だが、よくみると（ハードディスク上に作成するフォルダ名）とあるので、別にメールアドレスというわけではないらしい。単機能テストでは、ここでフォルダ名のエラー推測とかやるだろうが、組合せテストではそれらの検証を前提として行うので、「username@example.com」「Software Taro」「山田太郎」の3水準あたりか。アイコンは、プルダウン選択で「標準」「カスタム1」「カスタム2」「カスタム3」「NetNews用」「RSS用」「Web掲示板用」「HTMLページ更新チェック用」の8水準。ただし、これはアイコン表示という比較的重要度の小さい箇所と考え、グループ化するほうが効率的である。「標準」「カスタム系」「その他系」の3水準で十分じゃないかと。名前は、メール送信時のFromコメント部分に挿入されるであろう名前。なので、「username@example.com」「Software Taro」「山田太郎」「空欄」の4水準。メールアドレスは、形式縛りがあるので、「username@example.com」「notaddress」の2水準。実は、メールアドレス形式でなくても、警告ダイアログをOKとすれば設定可能なのだ。空欄だけはNG。

あれま、禁則とか題名で言っておきながら禁則なしでスタートですか。次は、この画面の組合せを直交表に割り付けてみる。3水準、3水準、4水準、2水準。直交表のサイズはいかに？