2.2 Utvalg, rekruttering og portvakter

Kravet som stilles: utvalget skal være begrunnet, ikke bare oppgitt. Begrunnelsen skal peke tilbake på problemstillingen og fram mot analysen: hva er det ved disse enhetene som gjør at de kan belyse spørsmålet?

Distinksjonen mot populasjonen: i et kvantitativt design er utvalget en miniatyr av en befolkning man vil si noe om. I et kvalitativt design er utvalget en samling tilfeller man vil forstå. Derfor er «for lite til å være representativt» en vurdering hentet fra feil design — den riktige vurderingen er hva materialet kan overføres til, og hva det ikke kan si noe om.

Hvorfor det nevnes i et kvalitativt emne: fordi du skal kunne si hvorfor du ikke bruker det. Tilfeldig trekking er den riktige framgangsmåten når spørsmålet gjelder fordeling i en befolkning — og det er nettopp den typen spørsmål et kvalitativt design ikke stiller.

Distinksjonen mot strategisk utvalg: tilfeldig utvalg gir enhetene lik sjanse; strategisk utvalg gir enhetene ulik sjanse med vilje, fordi noen av dem er mer opplysende enn andre for akkurat dette spørsmålet.

Logikken: utvalget skal maksimere informasjon, ikke speile en fordeling. Derfor kan et strategisk utvalg gjerne bestå av tilfeller som er sjeldne, ekstreme eller uvanlige — hvis det er de som viser mekanismen tydeligst.

Kravet som følger: siden enhetene er valgt fordi de er noe bestemt, må du si hva det er og hvorfor det hjelper. Et strategisk utvalg uten uttalt strategi er i praksis et bekvemmelighetsutvalg, og bør da kalles det.

Hvorfor ordvalget betyr noe: «informant» signaliserer at personen bidrar med kunnskap om noe, ikke at hun er et måleobjekt. I kvantitative undersøkelser kalles de tilsvarende gjerne respondenter — folk som svarer på det forskeren har bestemt på forhånd.

Distinksjonen mot undersøkelsesenhet: enheten kan være en situasjon, en tekst eller en hendelse. Informanten er alltid en person. Er enheten din situasjoner, har du kanskje få informanter og mange enheter — og det bør du si.

Logikken: ytterpunktene viser mekanismen i forstørret form. Det som er utydelig i et normaltilfelle, er ofte tydelig der presset er størst.

Prisen: ytterpunktene er nettopp ikke det vanlige, og et materiale av ekstremtilfeller sier lite om hvordan fenomenet arter seg i det jevne. Det skal du skrive, ikke skjule.

Logikken: når svært ulike tilfeller likevel viser det samme mønsteret, er mønsteret mer robust — og der de spriker, ser du hva forskjellen kommer av. Det gir grunnlag for å si noe om hva som varierer med hva.

Prisen: materialet blir spredt, og med få informanter risikerer du én av hver og ingen dybde i noen retning. Distinksjonen mot Weiss' engelske typologi: dette er nært det Weiss kaller maximize range, men de to typologiene er formulert i hver sin tradisjon og skal ikke slås sammen til én.

Logikken: når bakgrunnen holdes lik, blir variasjonen i det du faktisk er interessert i, lettere å se. Det egner seg også når fenomenet er sjeldent og du trenger dybde i én bestemt erfaring.

Prisen: du får ikke vite om mønsteret er noe ved gruppen eller noe ved fenomenet, siden du ikke har noe å sammenligne med. Det er den prisen som må skrives ut i besvarelsen.

Logikken: i miljøer som er lukkede, sårbare eller vanskelige å nå gjennom formelle kanaler, er en anbefaling fra noen som allerede stoler på deg, ofte den eneste veien inn. Tilliten følger med kontakten.

Prisen — nettverksskjevhet: folk anbefaler folk som ligner dem selv og som de er på god fot med. Utvalget følger dermed nettverkets form, og de som står utenfor nettverket, blir aldri spurt. Motgrepet: start flere snøballer fra ulike inngangspunkter, og skriv i besvarelsen at du gjør det og hvorfor.

Mekanismen: folk anbefaler folk de kjenner, stoler på og ligner. Dermed får forskeren én sosial krets, mens de perifere, isolerte eller uvennlige aldri kommer i betraktning — og det er ofte nettopp de som ville nyansert bildet.

Distinksjonen mot selvseleksjon: selvseleksjon handler om at deltakerne selv melder seg. Nettverksskjevhet handler om hvem som blir spurt i det hele tatt. De to opptrer gjerne sammen i snøballutvalg, og begge bør navngis når de gjør det.

Logikken: utvalget blir en prøve på en idé. Mener du at overgangen fra midlertidig til fast ansettelse er det som endrer hvordan folk snakker om arbeidsplassen, velger du folk på begge sider av den overgangen.

Distinksjonen mot maksimal variasjon: maksimal variasjon sprer utvalget langs mange dimensjoner uten å bestemme hvilken som betyr noe. Teoribasert utvalg peker ut én dimensjon på forhånd og bygger utvalget rundt den — og forutsetter dermed at du har et begrep før du begynner.

Hvorfor det står i et kvalitativt verk: Weiss bruker det som kontrastpunkt. Hans poeng er at intervjustudier stort sett ikke kan og ikke bør bygges slik, fordi formålet er å forstå og ikke å telle.

Distinksjonen mot Tellmann og Leseths «tilfeldig utvalg»: begrepene dekker samme idé, men de hører til hver sin framstilling. Skriv «probability sampling (Weiss)» eller «tilfeldig utvalg (Tellmann og Leseth)» — aldri det ene begrepet med den andres navn på.

Logikken: når du bare kan snakke med et lite antall, er det bedre å bruke plassene på ulike posisjoner enn på flere eksemplarer av den samme. Hver ny informant skal helst legge til noe materialet ikke allerede har.

Distinksjonen mot maksimal variasjon: ideen er nær beslektet, men avsenderne er ulike, og Weiss knytter sitt råd tett til intervjuhåndverket. Å skrive «maksimal variasjon (Weiss)» er en dokumentert glidning og bør unngås.

Hvorfor det ikke uten videre er diskvalifiserende: i mange prosjekter er dette den eneste realistiske veien til data, og et bekvemmelighetsutvalg som er erkjent og begrunnet, er langt bedre enn et bekvemmelighetsutvalg som utgir seg for å være strategisk.

Kravet som følger: si at det er det, si hvorfor det ble slik, og si hva skjevheten sannsynligvis gjør med materialet. En kandidat som skriver «utvalget er et bekvemmelighetsutvalg, og det betyr trolig at de mest misfornøyde ikke er med, siden de sjelden melder seg frivillig», har gjort et svakt utvalg til en styrke i besvarelsen.

Logikken: en analyse som bare har sett bekreftelser, vet ikke hvor grensene for mønsteret går. Har du med tilfeller som burde ha vist mønsteret og likevel ikke gjør det, kan du si noe om under hvilke betingelser det gjelder.

Distinksjonen mot å lete etter negative tilfeller i analysen: det er samme idé på to steder i prosjektet. I utvalget handler det om hvem du velger; i analysen handler det om hva du leter etter i materialet du allerede har. Begge deler trekker opp, og det ene erstatter ikke det andre.

Hvorfor det er en egen designbeslutning: veien inn former hvem du får. Rekrutterer du gjennom en arbeidsgiver, får du ansatte som arbeidsgiveren fant det greit å sende videre. Rekrutterer du i en gruppe på nett, får du dem som er aktive der.

Kravet i en designoppgave: veien skal navngis konkret, ikke antydes. «Informantene rekrutteres» er en tom setning; «informantene rekrutteres gjennom oppslag i to lokale bruktgrupper og gjennom kontakt med koordinatoren i gjenbruksstasjonen» er en plan som kan vurderes.

Den doble rollen — og dette er hele drøftingen: portvakten er både døråpner og filter. Uten portvakten kommer du ikke inn; med portvakten kommer du inn på portvaktens vilkår, og du får møte dem portvakten velger å sende videre.

Distinksjonen mot en nøkkelkontakt uten makt: en som bare tipser deg om hvor du kan henvende deg, kontrollerer ingen adgang. Portvakten er den som kan si nei — og hvis nei er reelt, er du i en avhengighet som må drøftes åpent i besvarelsen.

Konsekvensen for materialet: du risikerer å møte de veltilpassede, de velvillige og de artikulerte, og aldri dem som er i konflikt med portvakten eller på vei ut av feltet. Det er systematisk skjevhet, ikke tilfeldig støy.

Motgrepene, og de skal begrunnes: be om å få rekruttere også utenfor portvaktens kanal, skaff flere inngangspunkter, og — hvis ingen av delene går — skriv eksplisitt i besvarelsen hvilke stemmer materialet dermed sannsynligvis mangler. Det siste er ikke en innrømmelse av svakhet; det er transparensen sensor ser etter.

Styrken: rask tilgang, en viss legitimitet, og ofte praktisk hjelp med tid og sted.

Svakheten: organisasjonen er en portvakt, og deltakelsen kan oppleves som mindre frivillig når forespørselen kommer via en leder. Det er både en utvalgsskjevhet og et samtykkeproblem, og begge deler bør nevnes.

Styrken: den når mennesker som ikke er samlet noe fysisk sted, og den er ofte den eneste veien til spredte eller uformelle grupper.

Svakheten — selvseleksjon i særlig sterk form: du får dem som er aktive i kanalen og som har lyst til å delta. I tillegg gjelder moderatoren som portvakt, og det oppstår egne spørsmål om hva som er offentlig og hva som er privat på nett. Det siste er tema i kap. 5.1.

Styrken: rask tilgang og et tillitsforhold som allerede finnes, noe som kan gi mer åpenhet om sårbare tema.

Svakheten: rollesammenblanding, selvsensur og forutinntatthet — informanten snakker med en bekjent og ikke bare med en forsker, og forskeren tolker gjennom det hun allerede vet. Dette er lov, men det må drøftes; å intervjue bekjente uten å drøfte det er feil #14 i registeret over typiske feil, og temaet behandles i kap. 4.2.

Hvorfor det systematisk former materialet: de som melder seg, har som regel et forhold til temaet — et engasjement, en historie de vil fortelle, eller en sak. De likegyldige og de svært belastede melder seg sjeldnest.

Distinksjonen mot bekvemmelighetsutvalg: bekvemmelighet handler om hvem forskeren rakk å få tak i; selvseleksjon handler om hvem som ville. De opptrer ofte sammen, og begge skal navngis når de gjør det.

Hvorfor de er analytisk interessante: avslagene er sjelden tilfeldige. Sier alle mellomledere ja og ingen av dem som nettopp har sluttet, er det i seg selv en opplysning om hvem materialet kan si noe om.

Grepet som løfter: skriv én setning om hvem som takket nei og hva du tror det gjør med materialet. Det koster tre linjer og er ren transparens.

Hvorfor det ikke er det samme som en feil: alle kvalitative utvalg er skjeve i denne forstand, fordi de er små og valgt. Problemet oppstår først når skjevheten er ukjent for forskeren, eller kjent og fortiet.

Grepet som gjør skjevhet til noe analytisk: navngi hvilke posisjoner som mangler, si hvorfor de mangler, og begrens påstandene til det materialet dekker. En beskrevet skjevhet er informasjon om gyldighetsområdet; en ubeskrevet skjevhet er en feilkilde.

Hvorfor det er en designkomponent og ikke en formalitet: et design som forutsetter tilgang du ikke kan få, er ikke et design. Sensorveiledningene fra og med V2016 nevner urealistiske beskrivelser som et kjennetegn på de svakeste besvarelsene.

Konsekvensen for eksamen: velg et opplegg du kunne ha gjennomført, og si hvordan tilgangen skulle skaffes. Å designe for det man kan få tilgang til, er ikke å senke ambisjonen — det er å ta gjennomførbarheten på alvor.

Hva det er, og hva det ikke er: metning er en praktisk stoppregel og en vurdering forskeren gjør, ikke en terskel som kan måles. Den er heller ikke et bevis på at alt er funnet — den sier at akkurat dette utvalget, langs akkurat disse dimensjonene, har begynt å gjenta seg.

Kravet på eksamen: oppgi gjerne et anslag på antall, men knytt det til metning og til utvalgets spredning. «Ti til tolv intervjuer, men antallet justeres etter når materialet begynner å gjenta seg langs begge dimensjoner i utvalget» er både konkret og faglig riktig.

Tommelfingerregelen som faktisk holder: flere enheter gir bredde, færre gir dybde, og med en gitt mengde tid kjøper du det ene med det andre. Åtte grundig analyserte intervjuer er som regel et bedre materiale enn tjue overflatiske.

Distinksjonen mot statistisk utvalgsstørrelse: i et kvantitativt design henger antallet sammen med hvor presist man kan si noe om en befolkning. Det resonnementet finnes ikke her, og å importere det er den forvekslingen som koster mest.

Hvorfor de skal skrives ned: kriteriene gjør utvalget etterprøvbart i den eneste forstand som er mulig kvalitativt — leseren kan se hvem som var aktuelle og vurdere om avgrensningen var fornuftig.

Formen i en designoppgave: to til fire punkter er nok. «Har kjørt som bud i minst tre måneder», «kjører i Oslo», «er over 18 år». Merk at det siste kriteriet ofte er et etisk valg og ikke bare et praktisk et.

Sammenhengen: jo tydeligere du har beskrevet hva som kjennetegner enhetene dine, jo lettere kan en leser vurdere om hennes eget tilfelle ligner nok. Derfor er en presis utvalgsbeskrivelse et overførbarhetsgrep, ikke bare en formalitet.

Distinksjonen mot statistisk generalisering: statistisk generalisering hviler på trekkemåten og gjelder en definert befolkning. Overførbarhet hviler på likhet mellom tilfeller og vurderes for ett tilfelle om gangen. Kap. 1.2 behandler dette i dybden.

Slik virker den i praksis: problemstillingen bestemmer hvilke enheter som er relevante, enhetene bestemmer hvilken utvalgstype som gir mening, utvalgstypen bestemmer hva analysen kan sammenligne, og det igjen bestemmer hva funnene kan overføres til.

Distinksjonen mot validitet som eget kapittel i besvarelsen: validitet er ikke et avsnitt du legger til på slutten. Den bygges inn i valgene underveis — og det er derfor et ubegrunnet utvalg svekker validiteten selv om ordet aldri nevnes. Kvalitetskriteriene behandles i kap. 1.2.

Formen som virker: type + dimensjon + antakelse + bortvalg. «Maksimal variasjon i fartstid, fordi antakelsen er at nyankomne og erfarne beskriver presset ulikt; et homogent utvalg ville skjult nettopp den forskjellen.»

Hvorfor formen er verdt å pugge: den inneholder alt sensor ser etter i én setning, og den er lett å produsere under tidspress. Et konstatert utvalg er C-stoff, altså faglig korrekt, men uten leddet som løfter.