Mikä on Tilastollinen merkitsevyys
Testitulosten luotettavuus
Tilastollinen merkitsevyys on mitta sille, kuinka todennäköisesti testi- tai kokeilutulokset ovat aitoja eivätkä sattumaa.
Keskeiset käsitteet
- p-arvo — satunnaisen tuloksen todennäköisyys
- Merkitsevyystaso (α) — päätöskynnys
- Luottamusväli — arvojen vaihteluväli
- Otoskoko — havaintojen määrä
Liiketoimintasovellukset
- Verkkosivujen ja mainosten A/B-testaus
- Markkinointikampanjoiden tehokkuus
- Konversiomuutosten analyysi
- Tuotehypoteesien validointi
Yleiset kynnysarvot
- p < 0,05 — vakiotaso (95% luottamus)
- p < 0,01 — tiukka taso (99% luottamus)
- p < 0,001 — erittäin tiukka taso
Yleiset virheet
- Testien lopettaminen liian aikaisin
- Pienet otoskoot
- Useat vertailut ilman korjausta
- Käytännön merkitsevyyden huomiotta jättäminen