• Vigtigste
  • Nyheder
  • Hvem er udeladt i en webundersøgelse, og hvordan det påvirker resultaterne

Hvem er udeladt i en webundersøgelse, og hvordan det påvirker resultaterne

Undersøgelsesforskning bevæger sig hurtigt online - det er billigere, hurtigere, giver større fleksibilitet i design af spørgeskemaer og har ofte betydelige fordele i datakvalitet sammenlignet med telefonundersøgelser. Webundersøgelser vedtages i alle sektorer i branchen, lige fra markedsføring til US Census Bureau's American Community Survey til valgmåling.


Det gør det stadig vigtigere at vurdere nøjagtigheden af ​​disse undersøgelser. Undersøgelser, der kun inkluderer dem, der bruger internettet (og er villige til at tage undersøgelser online), risikerer at give partiske resultater. Og faktisk kan en bemærkelsesværdig andel af amerikanerne enten ikke eller ikke gennemføre en undersøgelse via internettet.

Det rejser to spørgsmål: Hvem savner du med en webundersøgelse, og hvordan påvirker det dine resultater?


I dette tilfælde var der en måde at komme til svarene ved at henvende sig til vores amerikanske trendpanel, en nationalt repræsentativ gruppe af amerikanere, der har accepteret at deltage i vores undersøgelser. De fleste af panelmedlemmerne deltager via internettet, men et stort antal (der repræsenterer næsten en femtedel af offentligheden) gør det ikke. Lidt mere end halvdelen af ​​disse ikke-web-deltagere er ikke online, og resten vil ikke angive en e-mail-adresse for at blive undersøgt. Men vieri stand til at undersøge medlemmerne, der ikke er webpaneler, via mail og vurdere, hvor meget, hvis overhovedet, deres manglende deltagelse vil påvirke resultatet i en national afstemning, der udelukkende er gennemført online

Her er fire vigtige fund fra vores nye rapport 'Dækningsfejl i internetundersøgelser.'

De fleste undersøgelseselementer adskiller sig lidt mellem fuld prøve og webprøve1Undersøgelsesresultaterne er for det mesteupåvirketnår ikke-web-respondenterne udelades.Der er ringe eller ingen forskel mellem den fulde prøve (web og mail kombineret) og den eneste webprøve i de fleste emner, der blev spurgt om. Kun ni undersøgelseselementer, vi testede, gav en forskel på 5 eller flere procentpoint, mens de øvrige 397 (98%) af undersøgelseselementerne gav en forskel på 4 procentpoint eller mindre. Mere specifikt gav ca. to tredjedele af de 406 varer estimater med en forskel på nul eller 1 point.



Udvalgt demografi for respondenter2Selvom de mennesker, der ikke kunne eller ikke ville tage webundersøgelsen, var meget forskellige fra de mennesker, der gjorde, gjorde det ikke nogen forskel i de nationale undersøgelsesresultater, hvis de blev udeladt.De ikke-web-respondenter er mere end dobbelt så sandsynlige, at internet-respondenterne er 65 år og ældre og næsten tre gange så sandsynlige at være sorte. Ikke-web respondenter har lavere uddannelsesniveauer og familieindkomst end webrespondenter. De er mindre tilbøjelige til at være gift eller indgået partnerskab og ikke sandsynligt, at de bor alene. Der er mindre forskelle mellem respondenter på internettet og ikke-web med hensyn til politisk identitet og engagement.


Teknologi og internetgenstande viser store forskelle3Et område hvor dervarvæsentlige forskelle var undersøgelseselementer vedrørende teknologi.De ni ud af 406 undersøgelseselementer, der har en forskel på mindst 5 procentpoint mellem hele stikprøven og webprøven, er relateret til internet- eller teknologibrug. Der er en 13-punkts forskel i daglig internetbrug mellem den eneste prøve på internettet (82%) og den samlede prøve (69%). Omkring otte ud af ti amerikanere i eksemplet kun med internettet sagde, at de havde sendt e-mail eller tekster til venner eller familie dagen før sammenlignet med ca. syv ud af ti i den samlede prøve. Helt 90% i den eneste prøve på Internettet ejer en stationær eller bærbar computer sammenlignet med 80% i den samlede prøve.

4Nogle resultater blandt ældre borgere, sorte og mindre veluddannede viste store forskelle mellem den samlede stikprøve og den eneste webprøve.Blandt voksne 65 og ældre er estimatet for daglig internetbrug 35 point højere i en webundersøgelse end den samlede stikprøve (74% mod 39%). Men selv nogle ikke-teknologiprodukter viser betydelige forskelle. Der er en 10-punkts forskel mellem amerikanere i alderen 65 år og derover, der er interesserede i bibellæsning mellem den fulde prøve og den web-eneste prøve. Sorte (65%) har en lignende beskæftigelsesfrekvens som hvide (61%) i webprøven, men blandt den fulde prøve er den hvide beskæftigelsesfrekvens 8 point højere end blandt sorte (62% mod 54%). Respondenter med en gymnasial uddannelse eller derunder er 7 point mere tilbøjelige til at have et kørekort i stikprøven kun end de i den fulde prøve.