有意水準とは、帰無仮説が正しいと仮定した場合に、観測された統計量が偶然によるものと判定するp値の閾値のことです。
例えば、有意水準を0.05とした場合、p値が0.05よりも小さい場合に、観測された統計量は偶然ではないとし、帰無仮説を棄却します。
一方、このとき、p値が0.05以上だった場合、観測された統計量は偶然とし、帰無仮説を棄却するには十分な証拠が得られなかったと解釈します。
通常、有意水準は、\(\alpha \)と表記します。