Istotność statystyczna odnosi się do prawdopodobieństwa, że jeśli w populacji, z której pobrano tę próbkę, prawdziwym efektem byłoby 0 (lub pewna hipotetyczna wartość), statystyka testowa byłaby tak ekstremalna lub bardziej ekstremalna, niż ta uzyskana w próbie.