Först lite bakgrund:

Fenomenet hemmafruar har de senaste veckorna gått hett i medier. Ursprunget till diskussionen finns i den statistik som togs fram i samband med en undersökning som genomfördes för att presentera hur många mammor som i dagsläget kan tänka sig att bli hemmafruar.

Det hela fick sin början i oktober när familjeliv.se presenterade sin rapport ”Sverigemamman 2011″. Den visade att 45 % av alla mammor (18-59 år) ville bli hemmafruar om de fick möjlighet. Medierna publicerade resultaten utan kritisk gransking som statistikt representativa för ”svenska mammor”. Undersökningen hade besvarats av 9 500 medlemmar utifrån ca 70 000 inbjudna och påstods vara statistiskt säkerställd för svenska mammor.

Den uppenbara inbäddade skevheten i undersökningen var det ingen som reagerade på, i alla fall inte bland de parter som publicerade resultaten. I undersökningsindustrin hade det dock börjat bubbla kritik mot såväl metod som resultat, men framförallt mot att resultaten beskrevs som representativa för riket.

Till slut fick Torbjörn Sjöström på Novus nog och genomförde en egen undersökning i Novus egen webpanel. Hans resultat pekar på att 29 % av kvinnorna i arbetsför ålder skulle vilja bli hemmafruar.

Vi på SnabbaSvar.se reagerade också på skevheten i att endast låta medlemmarna på familjeliv.se besvara frågan, och ställde själva frågan till befolkningen under perioden 27 oktober 2011 – 2 november 2011. Våra resultat är representativa för svenska folket i åldrarna 20-70 år, och visar att 29 % av männen och 31 % av kvinnorna kan tänka sig att bli hemmaman/hemmafru. Resultaten är således i linje med Novus resultat (det finns inga signifikanta skillnader).

Så vad är skevheten?

Varför skiljer sig resultatet från undersökningena som genomfördes av familjeliv.se, mot undersökningarna som genomfördes av Novus och SnabbaSvar.se? Och varför var det fel att påstå att undersökningen från familjeliv.se var representativ för svenska mammor?

Svaret är följande: Alla respondenter i undersökningen från familjeliv.se hade en gemensam nämnare; de är aktiva medlemmar i familjeliv.se. Det är ett systematiskt fel som med hög sannolikhet kommer att leda till skevheter i alla frågor som rör familjelivet. Undersökningsinstitutet som genomförde marknadsundersökningen åt familjeliv.se gjorde en sk. bortfallsanalys på de medlemmar som inte hade besvarat undersökningen, och konstaterade att de som föll bort inte skiljde sig strukturellt ifrån dem som svarade (strukturellt innebar att de inte skiljde sig på kön, ålder, region, antal barn, etc.). Vidare menade man att de demografiska variablerna bland de här mammorna visade upp en distribution som motsvarade mammorna i det svenska riket. Och därmed konstaterades att undersöknignen var statistiskt säkerställd. Men eftersom alla som bjöds in till undersökningen är medlemmar i familjeliv.se, och endast en liten del av sveriges kvinnor är med i familjeliv.se så kan man inte påstå att studien är representativ för svenska mammor. Det blir som att jämföra äpplen med päron

Vidare kan man notera att svarsfrekvensen var relativt låg. De bör således ha genomfört en bortfallsanalys på hur aktiva medlemmarna var som inte svarade, jämfört med medlemmarna som svarade. Det kan vara så att de medlemmarna som är mer aktiva på familjeliv.se, dvs. ävenledes de medlemmarna som influeras mest av sin relation med varumärket, kulturen och övriga aktiva medlemmar på sajten, är de medlemmarna som besvarat undersökningen.

Och hur skiljer sig undersökningarna från Novus och SnabbaSvar.se?

Undersökningarna ifrån Novus och SnabbaSvar.se genomfördes i webpaneler som rekryterats för att inte innehålla några systematiska skevheter (annat än den uppenbara och oundvikliga skevheten med webpaneler: internetaktivitet). I Novus fall rör det sig som en panel som till vilken man rekryterat alla möjliga olika människor och uppgår till 20 000 svenskar. I fallet SnabbaSvar.se rör det sig om urval dragna ur 40-60 av Sveriges största/minsta/generella/nichade paneler (sammantaget 500 000 svenskar) och på så vis låta de systematiska skevheterna ta ut varandra.

Observera

Det bör noteras att undersökningen från Novus riktar sig till folk i åldrarna 18-65 år (arbetsför ålder), medan den ifrån SnabbaSvar.se riktar sig till dem i åldrarna 20-70 år, och den ifrån familjeliv.se till åldrarna 18-59 år. Hade man önskat mäta exakta skillnader bör man givetvis ha börjat med att ställa frågorna till folk i exakt likadana åldersgrupper. Då SnabbaSvar.se endast tillhandahåller svar ifrån standardiserade åldersgrupper hade vi inte möjligheten att matcha exakt på åldersintervall.