예를 들어 가설 검정 절차에서 5% 유의 수준으로 설정했다고 한다면, 귀무 가설을 채택했어야 함에도 기각할 확률은 100번 중 다섯 번이라는 것입니다. 즉, 귀무 가설에 대해 잘못된 의사 결정 수준을 5%(다섯 번)로 설정했기 때문에 그 이하가 될 때 기각이 가능합니다. 따라서 유의 확률이 5%보다 작다면 귀무 가설을 기각할 수 있고, 5%보다 크다면 기각할 수 없습니다.

앞의 내용을 좀 더 자세히 살펴보겠습니다. 유의 확률이 8%라면 100번 중 여덟 번 잘못이 있을 수 있다는 의미이기 때문에 유의 수준 5%보다 크므로 귀무 가설을 기각할 수 없습니다.

그림 5 | 귀무 가설 기각 불가

다른 예시로 유의 확률이 3%라면 유의 수준인 5%보다 작으므로 기각역¹²에 들어가서 귀무 가설을 기각할 수 있습니다.

그림 6 | 귀무 가설 기각

즉, 검정했을 때 유의 확률이 유의 수준보다 클 경우 귀무 가설을 기각할 수 없고, 유의 수준보다 작으면 귀무 가설을 기각하고 대립 가설을 채택합니다.

한마디로 유의 수준과 유의 확률 간 크기를 비교해서 귀무 가설을 기각할지 그렇지 않을지를 판단한다고 이해하면 됩니다.