8.6 Feilvaksinen — de 16 feilene som senker karakteren

Hva feilen er: å definere p-verdien som sannsynligheten for at hypotesen ($H_0$ eller $H_1$) er sann eller feil. p er i stedet sannsynligheten for dataene gitt hypotesen — ikke for hypotesen gitt dataene.

Slik ser den ut i en besvarelse (feil): «$p = 0{,}03$ betyr at det er 3 % sannsynlig at $H_0$ er riktig, så vi er 97 % sikre på $H_1$.»

Slik ser sensor den: dette er den eneste feilen med en eksplisitt trekk-instruks i en veiledning (H2018). Den fanges umiddelbart og koster.

Vaksine (før/etter — lær utenat):

- ❌ Før: «$p = 0{,}03$ = 3 % sjanse for at $H_0$ er sann.»
- ✔ Etter: «$p = 0{,}03$ betyr at hvis $H_0$ var sann, ville vi fått et resultat minst så ekstremt som dette bare 3 % av gangene.»

Hele forskjellen: p er sannsynligheten for data gitt hypotese, ikke hypotese gitt data (som å forveksle «våte gater hvis regn» med «regn hvis våte gater»). Si alltid leddet «gitt at $H_0$ er sann» høyt når du definerer p.

Hva feilen er: å bytte om de to feilbeslutningene. Type I = forkaste en sann $H_0$ (falsk alarm, risiko $\alpha$). Type II = beholde en falsk $H_0$ (oversett effekt, risiko $\beta$).

Slik ser den ut (feil): «Type I-feil er når vi overser en ekte effekt.» (Det er Type II.)

Slik ser sensor den: V2024-veiledningen skriver rett ut at «det er ganske vanlig at studentene blander» — den er ventet og lett å oppdage.

Vaksine (før/etter + huskeregel):

- ❌ Før: «Type I = å ikke oppdage effekten.»
- ✔ Etter: «Type I = alarmen varsler brann uten røyk (forkaster sann $H_0$, risiko $\alpha$); Type II = alarmen overser brannen (beholder falsk $H_0$, risiko $\beta$).»

Huskeregel: 1 kommer før 2 — du setter $\alpha$ (Type I) når du planlegger; $\beta$ (Type II) er konsekvensen. Type I = å se noe som ikke er der; Type II = å ikke se noe som er der. (Og: power = $1-\beta$, ikke $1-\alpha$.)

Matrisen under viser de fire utfallene: de to riktige beslutningene på diagonalen, og Type I- (falsk alarm, α) og Type II-feilen (oversett effekt, β) i hjørnene.

Hva feilen er: å hoppe fra en korrelasjon ($r$) til «X fører til Y». En korrelasjon alene tillater aldri en årsaksslutning.

Slik ser den ut (feil): «Det er en negativ sammenheng mellom skjermtid og karakterer, altså senker skjermtid karakterene.»

Slik ser sensor den: kausalspranget er bokas viktigste korrelasjonsfelle — sensor ser etter om du eksplisitt avviser det og peker på alternativer.

Vaksine: skriv alltid at samvariasjon ikke er kausalitet, og pek på minst ett alternativ — retningsproblemet (Y kan påvirke X), en tredjevariabel/konfunder, eller spuriøsitet. «Sammenhengen kan skyldes en bakenforliggende faktor, f.eks. …».

Hva feilen er: å kalle en beskrivende kasusstudie et «N=1-eksperiment» fordi begge involverer én person. Et N=1/single-subject-design er et EKTE eksperiment (manipulasjon + kontrollfaser, f.eks. ABAB); en kasusstudie er ren beskrivelse uten manipulasjon.

Slik ser den ut (feil): «Freuds beskrivelse av én pasient er et N=1-eksperiment fordi det bare er én deltaker.»

Slik ser sensor den: advart mot to ganger i veiledningene — en forventet felle.

Vaksine (før/etter):

- ❌ Før: «Det er én person, altså N=1-eksperiment.»
- ✔ Etter: «Manipuleres en betingelse med kontrollfaser (ABAB)? Da er det et N=1-eksperiment. Bare rik beskrivelse av én person uten manipulasjon? Da er det en kasusstudie.»

Testen er alltid: manipuleres noe her? Antall deltakere avgjør ingenting.

Hva feilen er: å svare «indre og ytre validitet» når spørsmålet gjelder om en test/et måleinstrument er godt. Indre/ytre validitet gjelder slutninger fra studier; om en test måler riktig, er testvaliditet (face, innhold, kriterium, begrep).

Slik ser den ut (feil): «For å vurdere om spørreskjemaet er valid, ser vi på indre validitet (er sammenhengen kausal?) og ytre validitet (kan den generaliseres?).»

Slik ser sensor den: påpekt hvert år det spørres om — en pålitelig differensieringsfelle.

Vaksine (før/etter):

- ❌ Før: «Testens validitet = indre og ytre validitet.»
- ✔ Etter: «Testens validitet vurderes gjennom face-, innholds-, kriterie- og begrepsvaliditet: dekker leddene fenomenet (innhold), samsvarer skalaen med et etablert mål (kriterium), oppfører den seg som teorien forutsier (begrep)?»

Spør alltid: gjelder spørsmålet en studie eller et måleinstrument? Studie → indre/ytre validitet. Instrument → testvaliditet.

Hva feilen er: å behandle standardfeilen (SE) som «enda et spredningsmål», eller å bruke SD der SE(D) skal stå. SD = spredning mellom personer (endres ikke av $n$). SE = presisjonen i gjennomsnittsestimatet (krymper med $\sqrt{n}$): SE = SD/$\sqrt{n}$.

Slik ser den ut (feil): «Med større utvalg blir SD mindre, så dataene blir mindre spredt.»

Slik ser sensor den: den vanligste og mest kostbare feilen i statistikkdelen — et eksplisitt A-skille.

Vaksine: spør alltid — beskriver tallet folk eller snittet? Folk (spredning) → SD; presisjonen i snittet → SE. Større $n$ reduserer $SE$, ikke $SD$. I t-brøken deler du på SE(D) (standardfeilen for differansen), aldri på SD.

Hva feilen er: å kjøre parvise t-tester ved tre eller flere grupper — eller å velge ANOVA uten å kunne hvorfor (familywise error). Begrunnelsen er selve poenget.

Slik ser den ut (feil): «Med fem grupper kjørte jeg t-test mellom hvert par.» / «Jeg brukte ANOVA.» (uten begrunnelse).

Slik ser sensor den: testvalget er en drøfting; en test uten begrunnelse gir lite uttelling.

Vaksine: ved 3+ grupper → enveis ANOVA, fordi mange parvise t-tester blåser opp den samlede (familywise) feilraten (5 grupper → 10 par à 5 % risiko ≫ 5 % samlet). Skriv begrunnelsen, ikke bare testnavnet. (ANOVA regnes aldri ut på eksamen.)

Hva feilen er: å liste alle momentene (utvalgsmetoder, validitetsformer, designtrusler, forskningstrinn) uten å velge og begrunne for det konkrete caset. Gir C-tak — besvarelsen kan ikke nå over C uansett hvor komplett lista er.

Slik ser den ut (feil): «Utvalgsmetoder: enkel tilfeldig, stratifisert, systematisk, klynge, bekvemmelighet.» (og stopp der).

Slik ser sensor den: veiledningene ber sensor sjekke nettopp at kandidaten velger og begrunner — ikke bare remser.

Vaksine: for hvert moment, én setning om hvordan det slår inn i akkurat dette scenariet. Velg framfor å liste; anvend framfor å definere. «Definer — anvend på caset — begrunn».

— naturlig pausepunkt —

Hva feilen er: å konkludere som om et bekvemmelighetsutvalg (forelesningssalen, en Facebook-gruppe) var en miniatyrkopi av populasjonen.

Slik ser den ut (feil): «Vi spurte 150 studenter i forelesningen, så resultatet gjelder norske studenter generelt.»

Slik ser sensor den: en av de sikreste måtene å tape utvalgspoeng på — sensor ser etter om du navngir utvalgstypen og gjør generaliseringen betinget.

Vaksine: navngi bekvemmelighetsutvalget og frivillighetsbias, og gjør generaliseringen betinget: «resultatet gjelder først og fremst denne gruppen; generalisering til alle studenter er usikker på grunn av mulig frivillighets- og oppmøteskjevhet».

Hva feilen er: å levere en hypotese eller et ja/nei-spørsmål der oppgaven ber om et åpent, kvalitativt forskningsspørsmål. Dette er den kvalitative oppgavens eneste stryk-felle.

Slik ser den ut (feil): «Reduserer kveldsskjermbruk søvnkvaliteten hos ungdom?» (hypoteseformet, ja/nei).

Slik ser sensor den: eksplisitt i veiledningen — den ene tingen som kan felle en ellers lettvint oppgave.

Vaksine: kjør selvsjekken før du leverer — åpent spørreord? ingen påstand? ikke ja/nei? Tre ganger ja = gyldig. Malen «Hvordan opplever [gruppe] [fenomen]?» treffer alltid.

Hva feilen er: å velge en enhalet (retningsbestemt) test — og dermed halvere p — uten en faglig forhåndsbegrunnelse for retningen.

Slik ser den ut (feil): «Vi antar at gruppen skårer høyere, så vi bruker enhalet test», uten noe grunnlag for antakelsen før dataene ble sett.

Slik ser sensor den: V2025-veiledningen trekker eksplisitt for enhalet valg uten begrunnelse.

Vaksine: enhalet test er kun tillatt når retningen er begrunnet før dataene ble sett (teori eller tidligere funn). Er du i tvil, velg tohalet — det er det trygge standardvalget.

Hva feilen er: å formulere hypoteser om utvalgsgjennomsnittet ($\bar{x}$) i stedet for populasjonsgjennomsnittet ($\mu$). All slutningsstatistikk handler om det ukjente $\mu$ — utvalgssnittet kjenner vi allerede.

Slik ser den ut (feil): «$H_0: \bar{x} = 50$.»

Slik ser sensor den: en presisjonsfeil som røper at slutningslogikken ikke sitter.

Vaksine: skriv alltid hypotesene om populasjonen: «$H_0: \mu = 50$; $H_1: \mu \neq 50$». Vi tester en påstand om det vi ikke kjenner ($\mu$), ved hjelp av det vi målte ($\bar{x}$).

Hva feilen er: å oppgi et regnesvar uten å vise mellomregningen.

Slik ser den ut (feil): «$SD = 8{,}09$.» (og ingenting mer).

Slik ser sensor den: uten synlig fremgangsmåte kan sensor ikke gi «riktig metode»-uttellingen — og én tastefeil feller hele svaret. På eksamen er «vis utregningen» en fast regel.

Vaksine: sett opp alle ledd synlig — avvikstabell, deling, kvadratrot — og avslutt med en tolkning i ord. Fremgangsmåten teller mer enn tallet.

Hva feilen er: å bruke tid på å besvare alle fire eksamensoppgavene når du bare skal velge tre. Sensor ser bort fra den siste — arbeidet er bortkastet.

Slik ser den ut: kandidaten leverer fire fulle besvarelser, hver litt kortere enn de kunne vært.

Slik ser sensor den: den fjerde oppgaven telles ikke; tiden den tok, mangler på de tre som teller.

Vaksine: velg tre bevisst de første minuttene, og bruk hele tiden på dem. Alle tre teller likt, så en halvferdig tredjeoppgave er dyrere enn en «bare god nok» favoritt.

Hva feilen er: å øse på med tilstøtende kunnskap som ikke besvarer spørsmålet. Særlig fristende i den kvalitative oppgaven, som er billig men ikke gratis-å-utbrodere.

Slik ser den ut (feil): oppgaven ber om ett kvalitativt spørsmål; kandidaten skriver tre avsnitt om kvalitativ metodes historie og filosofi.

Slik ser sensor den: relevansfilteret — stoff honoreres bare når det gjøres relevant for spørsmålet. Utbrodering gir null og stjeler tid (den trekker ikke ned, men koster minuttene du trenger til A-skillene).

Vaksine: svar knapt og presist. Treff kjernepoengene, så videre. Spør ved hvert avsnitt: «besvarer dette spørsmålet?»

Hva feilen er: å svare på et etikk-spørsmål med generelle betraktninger om å «behandle folk fint», uten fagbegrepene.

Slik ser den ut (feil): «Det er viktig at deltakerne blir behandlet med respekt og ikke får det vondt, og at forskeren er ærlig.» (riktig følelse, null fagbegreper).

Slik ser sensor den: moralprat gir ikke uttelling; sensor vil ha fagforankring.

Vaksine: navngi og anvend begrepene: informert samtykke, personvern/konfidensialitet, rett til å trekke seg, deception + debriefing. (Samme prinsipp gjelder åpen vitenskap: navngi HARKing, pre-registrering, p-hacking, publikasjonsskjevhet — ikke bare «forskning bør være åpen».)