教科書で学ぶ仮説検定の枠組み
定義有意水準は、帰無仮説を棄却するかどうかの境目となる確率で、検定を行う前に決めておく。
解説例えば 5% や 1% がよく使われ、帰無仮説が正しいとしたときに標本の結果かそれ以上に偏った結果が起こる確率がこれを下回ると、「偶然とは考えにくい」として棄却する。有意水準は、実際には正しい帰無仮説を棄却してしまう確率をどこまで許すかを決める値でもある。小さく設定するほど、棄却の条件は厳しくなる。
たとえ「これより珍しい出来事なら偶然とは見なさない」と前もって引いておく合格線のようなもの。結果を見てから線を動かすと、判断が都合よく変わってしまう。
記憶フック「有意」は「偶然では片づけられない意味が有る」。境目を下回った結果を「有意な差」と呼ぶ。