有意水準

「どの程度の珍しさなら、偶然ではないと言い切るか」のハードルとなる数値である。

1.設定の根拠：5%に設定した場合、「20回に1回以下しか起きない珍しい現象なら、それは偶然ではない（有意である）」と判断することを意味する。命に関わる医療データなどでは、より厳しい1%が使われることが多い。

2.第一種の過誤：本当は正しい仮説を誤って捨ててしまう（偶然なのに意味があると誤認する）リスクの確率そのものでもある。有意水準を厳しくしすぎると、今度は「本当にある差」を見逃すリスク（第二種の過誤）が高まる。

3.実務での役割：分析を始める「前」に決めるのが鉄則である。分析結果を見てから水準を変えることは「データの改ざん」に近い行為として固く禁じられている。