Kildekritisk lesing av statistikk

Statistikk i media og reklame er ikke alltid nøytral. Sjekk ALLTID hvem som har laget undersøkelsen (kan de tjene på et bestemt resultat?), hvor mange som ble spurt (et lite utvalg kan gi tilfeldige, ikke-representative resultater), og HVORDAN spørsmålet ble stilt (et vinklet spørsmål kan styre svaret).

Tips

  • Spør «hvem har laget denne statistikken, og kan de ha en egeninteresse i resultatet?» før du stoler på en konklusjon.
  • Et utvalg på bare 20 personer kan gi et helt annet resultat enn et utvalg på 2 000 – sjekk alltid utvalgsstørrelsen før du generaliserer et resultat.

Eksempel: Vurdere en undersøkelse kritisk

En brusprodusent presenterer en undersøkelse der 90 % av 20 spurte personer foretrekker deres brus. Hva bør du sjekke før du stoler på konklusjonen?

Kildekritiske spørsmål å stille
SpørsmålSvar i dette tilfellet
Hvem laget undersøkelsen?Brusprodusenten selv
Hvor mange ble spurt?20 personer (lite utvalg)
Hvordan ble spørsmålet stilt?Ukjent – bør sjekkes
Løsning:
  1. Utvalget er bare 20 personer, som er et lite og trolig ikke representativt utvalg
  2. undersøkelsen er laget av produsenten selv, som har en klar egeninteresse i resultatet
  3. vi vet heller ikke hvordan spørsmålet ble stilt, eller hvem de 20 personene var
  4. svaret er sjekk utvalgsstørrelse, hvem som laget undersøkelsen, og hvordan spørsmålet ble stilt, før du stoler på 90 %-tallet.
Alternativ forklaring/metode: Sjekk om en nøytral kilde finner det samme

Alternativ metode – innenfor pensum, men ikke hovedmetoden her

Sammenligne med en uavhengig kilde

I stedet for å analysere undersøkelsen isolert, søk etter om en UAVHENGIG kilde (uten egeninteresse i resultatet) har undersøkt det samme – finner en nøytral kilde et lignende resultat med et større utvalg, styrker det troverdigheten; finner den noe annet, bør du være ekstra skeptisk.

Sjekke mot uavhengig kilde
KildeResultat
Brusprodusenten90 % foretrekker
Uavhengig kildebekrefter eller motsier

Oppgaver

Prøv minst én oppgave på hvert nivå.

Lett(3)

L-31En undersøkelse spør 5 000 tilfeldig utvalgte personer. En annen spør 15 personer på ett enkelt utested. Hvilken undersøkelse er mer pålitelig?

Vis fasit
Sammenligne utvalgsstørrelser
UndersøkelseUtvalg
A5 000
B15, mindre pålitelig
  1. Et større, tilfeldig utvalg (5 000) gir et mer representativt bilde enn et lite utvalg fra ett sted (15)
  2. undersøkelsen med 5 000 personer er mer pålitelig

L-32Et sigarettmerke finansierer en studie som konkluderer at røyking ikke er farlig. Hvorfor bør du være skeptisk?

Vis fasit
Egeninteresse i en studie
FinansiørKonklusjon
Sigarettmerkerøyking er ikke farlig, mistenkelig
  1. Den som finansierer en undersøkelse kan ha en egeninteresse i et bestemt resultat
  2. sjekk hvem som har finansiert undersøkelsen

L-33Hva bør du sjekke i tillegg til selve tallet når du leser en statistikk i en avis?

Vis fasit
Kildekritiske sjekkpunkter
SjekkBetydning
Kildehvem laget den
Utvalghvor mange spurt
Spørsmålhvordan stilt
  1. Tallet alene forteller ikke om undersøkelsen er pålitelig
  2. sjekk kilde, utvalgsstørrelse og spørsmålsformulering
Middels(3)

M-31Et spørsmål er formulert «Er du enig i at den fantastiske nye parken bør bygges?» Hvorfor kan dette gi et skjevt resultat?

Vis fasit
Vinklet spørsmålsformulering
Ord i spørsmåletEffekt
«fantastiske»styrer svaret mot ja
  1. Spørsmålet bruker et positivt ladet ord («fantastiske») FØR folk får ta stilling
  2. vinklet spørsmålsformulering kan styre svaret

M-32En skole rapporterer at «90 % av elevene er fornøyde», men bare halvparten av elevene svarte på undersøkelsen. Hva bør du spørre om?

Vis fasit
Svarskjevhet
TallForbehold
90 % fornøydebare halvparten svarte
  1. 90 % høres høyt ut, men bare halvparten svarte på undersøkelsen
  2. de som velger å svare er ikke nødvendigvis representative for alle
  3. svarskjevhet: kanskje de misfornøyde ikke svarte

M-33En reklame sier «8 av 10 tannleger anbefaler denne tannkremen», men det viser seg at bare 10 tannleger totalt ble spurt. Er dette overbevisende statistikk?

Vis fasit
Tannlege-reklamen
PåstandUtvalg
8 av 10 anbefaler10 totalt, for lite
  1. 8 av 10 høres overbevisende ut, men et utvalg på bare 10 personer totalt er for lite til å generalisere
  2. nei, for lite utvalg til å være pålitelig
Vanskelig(3)

V-31En nettside viser en «undersøkelse» der besøkende frivillig stemmer i en avstemning om et politisk tema. Hvorfor er dette IKKE representativt for befolkningen?

Vis fasit
Frivillig nettavstemning
UtvalgstypeRepresentativt?
Frivillig (self-selection)nei, kun interesserte
  1. Et frivillig utvalg (self-selection) består av folk med spesiell interesse for temaet, ikke et tilfeldig utvalg
  2. ikke representativt, kun interesserte deltar

V-32To studier om samme tema kommer til motstridende konklusjoner. Den ene har 200 deltakere, den andre har 20 000. Hvilken bør du stole mest på, og hvorfor kan det likevel være lurt å sjekke begge nærmere?

Vis fasit
To motstridende studier
StudieDeltakere
A200
B20 000, mer pålitelig
  1. Et større utvalg (20 000 mot 200) reduserer normalt tilfeldige feil, men utvalgsstørrelse er bare ÉN av flere kildekritiske faktorer
  2. stol mest på den store studien, men sjekk begge for finansiering og metode

V-33En overskrift sier «Ny studie: sjokolade forlenger livet!», basert på en undersøkelse av 12 personer over én uke. Nevn to grunner til å være skeptisk.

Vis fasit
Sjokolade-overskriften
FaktorProblem
Utvalg12 personer
Tidsromén uke, for kort
  1. 12 personer er et svært lite utvalg, og levealder kan ikke måles pålitelig over bare én uke
  2. for lite utvalg og for kort tidsrom til en slik konklusjon