Testovanie hypotéz je rozšírený vedecký proces používaný vo všetkých štatistických a spoločenských vedných odboroch. V štatistickej štúdii sa štatisticky významný výsledok (alebo výsledok so štatistickou významnosťou) v teste hypotézy dosiahne, keď je p-hodnota nižšia ako definovaná hladina významnosti. p-hodnota je pravdepodobnosť získania štatistického výsledku testu alebo výsledku vzorky tak extrémne, ako je extrémne pozorované alebo viac v štúdii, zatiaľ čo hladina významnosti alebo alfa hovorí výskumníkovi, aké extrémne výsledky musia byť, aby boli odmietnuté nulová hypotéza. Inými slovami, ak je p-hodnota rovnaká alebo menšia ako definovaná hladina významnosti (zvyčajne sa označuje a) výskumný pracovník môže bezpečne predpokladať, že pozorované údaje nie sú v súlade s predpokladom, že nulová hypotéza je pravda, čo znamená, že nulovú hypotézu alebo predpoklad, že medzi testovanými premennými neexistuje žiadny vzťah, možno odmietnuť.
Odmietnutím alebo vyvrátením nulovej hypotézy výskumník dospel k záveru, že existuje vedecký základ - presvedčenie je nejaký vzťah medzi premennými a že výsledky neboli spôsobené chybou výberu vzorky alebo - šance. Aj keď odmietnutie nulovej hypotézy je ústredným cieľom väčšiny vedeckých štúdií, je potrebné si uvedomiť, že odmietnutie nulovej hypotézy nie je rovnocenné s dôkazom výskumnej alternatívy hypotéza.
Štatistické významné výsledky a úroveň významnosti
Pojem štatistickej významnosti je základom testovania hypotéz. V štúdii, ktorá zahŕňa odobratie náhodnej vzorky z väčšej populácie v snahe dokázať nejaký výsledok, ktorý možno použiť na V prípade populácie ako celku existuje konštantný potenciál, aby údaje zo štúdie boli výsledkom chyby pri výbere vzorky alebo jednoduchej náhodnej zhody alebo šance. Stanovením úrovne významnosti a testovaním p-hodnoty proti nej môže výskumný pracovník s istotou potvrdiť alebo odmietnuť nulovú hypotézu. Úroveň významnosti v najjednoduchšom zmysle je pravdepodobnosť prahu nesprávneho odmietnutia nulovej hypotézy, ak je to skutočne pravda. Toto je tiež známe ako chyba typu I. Rýchlosť. Úroveň významnosti alebo alfa je preto spojená s celkovou úrovňou spoľahlivosti testu, čo znamená, že čím vyššia je hodnota alfa, tým väčšia je spoľahlivosť v teste.
Chyby typu I a úroveň závažnosti
K chybe typu I alebo k chybe prvého druhu dochádza, keď je neplatná hypotéza zamietnutá, keď je to v skutočnosti pravda. Inými slovami, chyba typu I je porovnateľná s chybnou pozitívou. Chyby typu I sa kontrolujú definovaním vhodnej úrovne závažnosti. Osvedčené postupy pri testovaní vedeckých hypotéz si vyžadujú výber úrovne významnosti ešte pred začiatkom zberu údajov. Najbežnejšia hladina významnosti je 0,05 (alebo 5%), čo znamená, že existuje 5% pravdepodobnosť, že pri teste dôjde k chybe typu I zamietnutím skutočnej nulovej hypotézy. Táto hladina významnosti sa naopak premieta do 95% úroveň dôvery, čo znamená, že pri sérii testov hypotézy nebude mať 95% za následok chybu typu I.