Статистичка значајност подразумева одлуку да ли је примећена веза између две или више варијабле настала деловањем случаја или је настала деловањем неког експерименталног фактора.

Одлука да ли ће се прихватити или одбацити нулта хипотеза базирана је на контрасту између добијених резултата и оних који би били очекивани да је нулта хипотеза тачна. Одлука се доноси коришћењем адекватног статистичког теста.

Неки статистички софтвери, као што је СПСС, аутоматски израчунавају вероватноћу појаве добијеног резултата статистичког теста. Ако софтвер не израчунава вероватноћу појаве таквог резултата статистичког теста, онда се вероватноћа израчунава коришћењем таблице критичних вредности за тај тест. Таблице критичних вредности се обично налазе у додатку уџбеника из статистике и садрже екстремне вредности за одређени статистички тест које су мало вероватне да се десе уколико је нулта хипотеза тачна.

Критичне вредности представљају вероватноћу појаве одређеног резултата теста деловањем самог случаја. Уколико је критична вредност већа од добијеног резултата статистичког теста, не одбацује се нулта хипотеза, јер је вероватноћа појаве таквог резултата већа од изабраног нивоа значајности.

Треба напоменути да ниво значајности бира истраживач. То може бити било која вредност у интервалу 0-100%, али је уобичајено да се бира ниво значајности од 5% или 1%, између осталог и зато што су за њих израчунате вредности у статистичким таблицама.

У друштвеним наукама уобичајено је да се користи ниво значајности од 0,05. То практично значи да постоји вероватноћа од 5% да је уочена веза између варијабли настала деловањем случаја. Ако се сматра да је 5% велика вредност, може се одабрати ниво значајности од 0,01 (1%). Ниво значајности се обележава α, грчким словом алфа.

Уколико је вероватноћа п>0,05 не одбацује се нулта хипотеза, јер је вероватноћа да је уочена веза између варијабли настала деловањем случаја већа од 5%. Уколико је вероватноћа п<0,05 одбацује се нулта хипотеза, јер је вероватноћа да је уочена веза између варијабли настала деловањем случаја мања од 5%.

Обележавање п>0,01 значи да вероватноћа да је уочена веза између варијабли настала деловањем случаја већа од 1%, а п<0,01 да је вероватноћа да је уочена веза између варијабли настала деловањем случаја мања од 1%.

Статистичка значајност није исто што и практична значајност. Мала разлика може бити статистички значајна, а да нема практични значај. Статистичка значајност значи да су уочене разлике или повезаности између варијабли настале деловањем неког експерименталног фактора, а не деловањем самог случаја.