Статистичка значајност подразумева одлуку да ли је примећена веза између две или више варијабли настала деловањем случаја или је настала деловањем неког експерименталног фактора.

Одлука да ли ће се прихватити или одбацити нулта хипотеза базирана је на контрасту између добијених резултата и оних који би били очекивани да је нулта хипотеза тачна. Одлука се доноси коришћењем адекватног статистичког теста.

Неки статистички софтвери, као што је SPSS, аутоматски израчунавају вероватноћу појаве добијеног резултата статистичког теста. Ако софтвер не израчунава вероватноћу појаве таквог резултата статистичког теста, онда се вероватноћа израчунава коришћењем таблице критичних вредности за тај тест. Таблице критичних вредности се обично налазе у додатку уџбеника из статистике и садрже екстремне вредности за одређени статистички тест које су мало вероватне да се десе уколико је нулта хипотеза тачна.

Критичне вредности су граничне вредности статистичког теста које дефинишу границу области одбацивања нулте хипотезе за одабрани ниво значајности (α). Уколико је добијени резултат статистичког теста по апсолутној вредности већи од критичне вредности, одбацује се нулта хипотеза, јер је вероватноћа добијања таквог резултата мања од изабраног нивоа значајности.

Треба напоменути да ниво значајности бира истраживач. То је мала вредност близу нуле, а у пракси је уобичајено да се бира ниво значајности од 5% (α = 0,05) или 1% (α = 0,01), између осталог и зато што су за њих израчунате вредности у статистичким таблицама.

У друштвеним наукама уобичајено је да се користи ниво значајности од 0,05. То практично значи да постоји вероватноћа од 5% да је уочена веза између варијабли настала деловањем случаја. Ако се сматра да је 5% велика вредност, може се одабрати ниво значајности од 0,01 (1%). Ниво значајности се обележава грчким словом алфа (α).

Уколико је вероватноћа p>0,05 не одбацује се нулта хипотеза, јер је вероватноћа да је уочена веза између варијабли настала деловањем случаја већа од 5%. Уколико је вероватноћа p<0,05 одбацује се нулта хипотеза, јер је вероватноћа да је уочена веза између варијабли настала деловањем случаја мања од 5%.

Обележавање p>0,01 значи да вероватноћа да је уочена веза између варијабли настала деловањем случаја већа од 1%, а p<0,01 да је вероватноћа да је уочена веза између варијабли настала деловањем случаја мања од 1%.

Статистичка значајност није исто што и практична значајност. Мала разлика може бити статистички значајна, а да нема практични значај. Статистичка значајност значи да су уочене разлике или повезаности између варијабли настале деловањем неког експерименталног фактора, а не деловањем самог случаја.