Da Linn begynte å lese tallene bak lesevanene

Linn jobber med kommunikasjon i en mellomstor organisasjon i Rogaland, og hun meldte seg på modulen om publikumsatferd og mediebruk tidlig i høst. Hun hadde ingen journalistisk bakgrunn, men et konkret problem: lederen hennes mente at lesere under førti nesten ikke lenger åpnet nyhetsbrev, og ville legge ned det som var igjen av dem. Linn var usikker. Hun hadde sett en oppsummering av en undersøkelse som pekte i den retningen, men kjente ikke igjen tallene fra egne statistikker.

Hun sa det rett ut første kveld: hun visste ikke om hun skulle stole på undersøkelsen eller på sin egen magefølelse. Jeg svarte at ingen av delene er et godt utgangspunkt, og at modulen nettopp handler om å finne noe tredje. Vi begynte med et enkelt spørsmål som mange hopper over: hvem er det egentlig som har svart, og hva ble de spurt om, ordrett?

Linns første øvelse var å gå tilbake til selve undersøkelsen og ikke bare oppsummeringen. Hun fant metodedelen etter litt leting og skrev ned tre ting: hvor mange som hadde svart, hvordan de var plukket ut, og hvilken tidsperiode spørsmålene gjaldt. Utvalget viste seg å være lagt til folk som hadde svart via en nettside der de allerede var registrert som brukere av digitale tjenester.

Det forklarte noe. Gruppen var ikke tilfeldig trukket, og den sa lite om folk som aldri hadde meldt seg inn noe sted. Linn skrev i arbeidsboken sin at tallene kanskje fortalte noe sant om de som svarte, men at hun ikke kunne bruke dem som beskrivelse av lesere generelt. Jeg anbefalte at hun formulerte det slik, uten å avvise undersøkelsen. En begrenset kilde er fortsatt en kilde, så lenge du sier hva den dekker.

• Antall svar og hvordan de ble rekruttert
• Hvilken tidsperiode spørsmålene dekket
• Om spørsmålet målte vane, holdning eller hukommelse

Neste steg var skillet mellom oppgitt og observert atferd. I undersøkelsen hadde folk svart på hvor ofte de leste nyhetsbrev. Slike svar bygger på hukommelse og på et ønske om å fremstå fornuftig, og de avviker ofte fra hva som faktisk skjer. Linn hadde derimot noe undersøkelsen manglet: egne åpningstall fra de siste månedene, samlet inn uten at noen ble bedt om å huske.

Hun satte de to kildene side om side i en enkel tabell. Der undersøkelsen antydet synkende interesse, viste hennes egne tall et jevnt nivå, med en liten økning blant lesere som hadde abonnert i over to år. Hun var forsiktig med å tolke dette som en motsetning. Det kunne like gjerne være to forskjellige grupper som beskrev ulike deler av det samme bildet, og det skrev hun også.

Mot slutten av modulen skulle hver deltaker formulere et kort funn med tydelig angitt belegg. Linn skrev en halv side til lederen. Hun begynte med det hun visste av egne tall, nevnte undersøkelsen med utvalg og begrensninger, og avsluttet med hva hun ikke kunne si noe om. Hun anbefalte ikke å legge ned nyhetsbrevet, men å følge åpningstallene i ytterligere et halvt år og skille mellom nye og eldre abonnenter.

Det var ikke noe dramatisk resultat, og jeg vil være tydelig på at kurset ikke lover slike. Det Linn fikk, var en måte å svare på som tålte oppfølgingsspørsmål. Lederen stilte tre, og hun hadde svar på alle fordi hun hadde notert hvor hvert tall kom fra. Det er den typen trygghet modulen er ment å gi, og den kommer av ryddig arbeid, ikke av å ha rett.

• Egne tall først, deretter ekstern kilde
• Utvalg og begrensninger nevnt i klartekst
• Et avgrenset forslag i stedet for en konklusjon

Som instruktør lærer jeg like mye av slike forløp som deltakerne gjør. Linn minnet meg om hvor lett en oppsummering får mer tyngde enn originalen, særlig når den bekrefter noe vi allerede mistenker. Hun leste ikke raskere enn andre, men hun stilte det samme kjedelige spørsmålet hver gang: hvem sier dette, og om hvem?

Jeg har siden lagt inn en kort øvelse tidlig i modulen der alle må finne metodedelen i en undersøkelse de selv har møtt, og skrive ned utvalget med egne ord. Den tar ti minutter og avslører mer enn en lang forelesning om skjevheter. Mange oppdager at de aldri har åpnet selve rapporten, bare artikkelen om den.