Nullhypotese, alternativ hypotese, signifikansnivå og type I/II-feil.
Hypotesetesting og p-verdiar
Hypotesetesting er det mest sentrale verktøyet i statistisk analyse. Det gjev oss ein systematisk metode for å avgjere om eit observert resultat er «ekte» eller berre kan skuldast tilfeldigheiter.
Læringsmål:
- Formulere nullhypotese og alternativ hypotese
- Forstå og tolke p-verdiar korrekt
- Forklare signifikansnivå og rolla det har
- Skilje mellom type I-feil og type II-feil
- Gjennomføre ein enkel hypotesetest steg for steg
Nullhypotese og alternativ hypotese
Hypotesetesting byrjar alltid med to motstridande påstandar:
Nullhypotesen er utgangspunktet — han representerer «status quo» eller antakinga om at det ikkje er nokon effekt, skilnad eller samanheng. Nullhypotesen er den påstanden vi prøver å motbevise.
Alternativhypotesen (eller ) er påstanden til forskaren — at det er ein effekt, skilnad eller samanheng. Det er denne vi ønskjer å finne støtte for.
Logikken bak hypotesetesting
Hypotesetesting følgjer ein indirekte logikk som liknar reductio ad absurdum (bevis ved sjølvmotseiing):
1. Anta at er sann (ingen effekt)
2. Rekn ut sannsynet for å observere eit resultat like ekstremt eller meir ekstremt enn det vi faktisk observerte, gjeve at er sann
3. Konkluder: Dersom dette sannsynet er veldig lite, er det usannsynleg at er sann → vi forkastar til fordel for
Vi beviser aldri direkte. I staden argumenterer vi for at dataa er så usannsynlege under at vi vel å forkaste han.
- (gjennomsnittet er lik ein bestemt verdi)
- (ingen skilnad mellom grupper)
- (ingen korrelasjon)
Alternativhypotesen : Den motstridande påstanden — at det er ein effekt. Kan vere:
- Tosidig: (skilnad i begge retningar)
- Einsidig: eller (skilnad i éi bestemt retning)
Ein bilprodusent hevdar at ein ny motortype gjev gjennomsnittleg drivstofforbruk på liter per mil. Ein forbrukarorganisasjon mistenkjer at forbruket er høgare. Formuler passande hypotesar.
seier at påstanden til produsenten stemmer. seier at det sanne forbruket er høgare.
Hadde vi ikkje hatt nokon spesifikk retning på mistanken — berre at forbruket er annleis enn oppgjeve — ville vi brukt ein tosidig test:
Valet mellom einsidig og tosidig test må gjerast før dataa vert analyserte.
Ein forskar vil teste om eit nytt medikament senkar blodtrykket samanlikna med placebo. Kva er rett nullhypotese?
P-verdiar og signifikansnivå
P-verdien er nøkkeltalet i hypotesetesting. Han svarar på spørsmålet: «Dersom nullhypotesen er sann, kva er sannsynet for å observere eit resultat like ekstremt eller meir ekstremt enn det vi faktisk observerte?»
Ein liten p-verdi tyder at resultatet er usannsynleg under , noko som tyder på at kanskje ikkje er sann.
Signifikansnivå
Før vi utfører testen, vel vi eit signifikansnivå — den grensa vi brukar for å avgjere om p-verdien er «liten nok». Det vanlegaste valet er (5 %).
Avgjerdsregel:
- Dersom : Vi forkastar . Resultatet er statistisk signifikant.
- Dersom : Vi forkastar ikkje . Vi har ikkje nok evidens til å konkludere med at det er ein effekt.
Vanlege misforståingar om p-verdiar
P-verdien er eit av dei mest misforståtte omgrepa i vitskap:
- P-verdien er IKKJE sannsynet for at er sann
- P-verdien er IKKJE sannsynet for at resultatet skuldast tilfeldigheiter
- P-verdien seier IKKJE noko om storleiken på effekten
- Statistisk signifikans tyder IKKJE nødvendigvis praktisk betydning
P-verdien er berre sannsynet for dataa (eller meir ekstreme data) gjeve at er sann. Det er eit vilkårsbunde sannsyn: .
Signifikansnivå er den førehandsbestemte grensa for å forkaste . Vanlege val:
- (5 %) — standard i dei fleste fagfelt
- (1 %) — strengare, brukt i medisin og partikkelfysikk
- (10 %) — meir liberal, brukt i pilotstudiar
Ein forskar testar om eit treningsprogram betrar løpstida på 3000 m. Utvalet er deltakarar. Etter programmet er gjennomsnittleg forbetring sekund med standardavvik sekund. Forskaren utfører ein t-test og får . Tolk resultatet med .
- : Treningsprogrammet gjev ingen forbetring ()
- : Treningsprogrammet gjev forbetring ()
P-verdi:
Tolking: Dersom treningsprogrammet ikkje hadde nokon effekt ( sann), er sannsynet for å observere ei forbetring på 18 sekund eller meir berre 0,4 %. Dette er svært usannsynleg.
Konklusjon: Sidan , forkastar vi . Resultatet er statistisk signifikant — det tyder på at treningsprogrammet gjev ei reell forbetring i løpstid.
Viktig: Vi seier ikkje at det er 99,6 % sannsyn for at programmet verkar. Vi seier berre at dataa er svært usannsynlege dersom programmet ikkje verkar.
Ein forskar utfører ein hypotesetest med og får . Kva konklusjon er korrekt?
Type I-feil og type II-feil
Kvar statistisk avgjerd kan vere feil. Det finst to typar feil:
Type I-feil (falsk positiv): Vi forkastar sjølv om han faktisk er sann. Vi konkluderer feilaktig med at det er ein effekt når det ikkje er det. Sannsynet for type I-feil er lik signifikansnivået .
Type II-feil (falsk negativ): Vi forkastar ikkje sjølv om han faktisk er usann. Vi overser ein reell effekt. Sannsynet for type II-feil vert kalla .
| er sann | er usann | |
|---|---|---|
| Forkastar | Type I-feil () | Rett avgjerd (styrke = ) |
| Forkastar ikkje | Rett avgjerd | Type II-feil () |
Teststyrke (power)
Teststyrken er sannsynet for å forkaste når han faktisk er usann — altså sannsynet for å oppdage ein reell effekt:
Teststyrken aukar med:
- Større utvalsstorleik — meir data gjev meir presis statistikk
- Større effektstorleik — jo større den sanne effekten er, desto lettare er han å oppdage
- Høgare signifikansnivå — men dette aukar òg risikoen for type I-feil
- Mindre variasjon i dataa — mindre «støy» gjer det lettare å sjå «signalet»
Ein vanleg tommelregel er at teststyrken bør vere minst 0,80 (80 %). Det tyder at vi aksepterer ein 20 % risiko for å oversjå ein reell effekt.
Type II-feil (-feil): Ikkje forkaste ein usann nullhypotese. Sannsyn: .
Teststyrke (power): — sannsynet for å oppdage ein reell effekt.
Dei to feiltypane står i eit spenningsforhold: Å redusere (strengare krav for å forkaste ) aukar (større risiko for å oversjå reelle effektar), og omvendt. Den einaste måten å redusere begge samstundes er å auke utvalsstorleiken.
Eit legemiddelfirma testar eit nytt smertestillande medikament. : Medikamentet har ingen effekt. : Medikamentet reduserer smerte. Forklar kva type I-feil og type II-feil tyder i denne konteksten, og drøft kva feil som har dei mest alvorlege konsekvensane.
Type II-feil (falsk negativ): Vi konkluderer med at medikamentet ikkje verkar, men det gjer det eigentleg. Konsekvens: Eit effektivt medikament vert forkasta. Pasientar går glipp av ei behandling som kunne ha hjelpt dei.
Kva er verst? Det er avhengig av konteksten. I medisin vert type I-feil ofte rekna som mest alvorleg fordi det kan føre til at uverksame (eller farlege) medikament vert tekne i bruk. Difor vert ofte brukt i medisinsk forsking. Men type II-feil er òg alvorleg — mange potensielt livreddande medikament kan bli forkasta fordi studiane var for små til å oppdage effekten.
Ein forskar brukar signifikansnivå . Kva er sannsynet for å gjere ein type I-feil?
Oppsummering
- Nullhypotesen representerer «ingen effekt» og er utgangspunktet for kvar hypotesetest.
- Alternativhypotesen er påstanden til forskaren om at det er ein effekt. Han kan vere tosidig eller einsidig.
- P-verdien er sannsynet for å observere data like ekstreme eller meir ekstreme enn dei observerte, gjeve at er sann.
- Vi forkastar dersom . Standard signifikansnivå er .
- Type I-feil (falsk positiv) er å forkaste ein sann — sannsyn lik .
- Type II-feil (falsk negativ) er å ikkje forkaste ein usann — sannsyn lik .
- Teststyrken bør vere minst 0,80 og aukar med utvalsstorleik, effektstorleik og signifikansnivå.
- P-verdien seier ikkje noko om sannsynet for at er sann, og heller ikkje om den praktiske betydninga av effekten.
Ein skule vil teste om ein ny undervisningsmetode gjev betre resultat enn den tradisjonelle. 40 elevar vert testa: 20 med ny metode (gjennomsnitt 74 poeng, ) og 20 med tradisjonell metode (gjennomsnitt 68 poeng, ). (a) Formuler og . (b) Skilnaden er 6 poeng med . Er resultatet signifikant ved ? (c) Kva kan forklare at vi ikkje finn signifikant skilnad sjølv om skilnaden verkar «stor»?
Forklar med eit dagleglivsdøme (t.d. brannalarm, covid-test, rettssak) kva type I-feil og type II-feil tyder. Drøft kva feil som er verst i ditt døme, og korleis ein kan redusere risikoen for begge.
Ein forskar finn med . Kva påstand er MEST korrekt?
Dette kapitlet er skrevet av Anthropics toppmodeller (Claude Opus og Claude Fable) og er foreløpig ikke manuelt gjennomgått — kvalitetskontrollen gjøres av uavhengige KI-agenter, og innmeldte feil rettes fortløpende. Funnet en feil? Meld fra, så retter vi den. Les mer om hvordan innholdet lages.