De 5 Mest Skadelige Undersøkelsesresponsforskjellene (Og Hvordan Du Kan Unngå Dem)

Vi mennesker liker å tro at vi er helt rasjonelle vesener, men sannheten er at ingen av oss er logiske hundre prosent av tiden.

Selv Apollo—den greske guden for logikk og rasjonell tanke-gjorde alle slags irrasjonelle ting, som da han utfordret mennesker til musikkkonkurranser eller prøvde så hardt Å forføre Daphne at hun ble Til Et Laurbærtre for å unnslippe ham. (Myter er rare.)

vår irrasjonalitet gjør oss menneskelige. Og en del av den irrasjonaliteten er tusenvis av forstyrrelser som går gjennom hodene våre, påvirker vår tenkning, danner vår tro og påvirker hvert minutt beslutning og dom vi gjør daglig.

Bias er overalt. Og den viktigste formen for it i undersøkelser og forskning er responsbias. Det svinger resultater og påvirker datainnsamlingskvaliteten, mesteparten av tiden, uten at du engang vet det.

det er umulig å helt fjerne skjevheter. De er som mygg i Den Australske sommeren-du kan aldri bli kvitt dem, du kan bare gjøre ditt beste for å minimere deres innvirkning.

i denne omfattende veiledningen skisserer vi trinnene du kan ta for å sikre at du gjør alt i din makt for å unngå responsbias og samle nøyaktige data.

Hva Er Responsbias?

responsbias er et begrep for når respondenter ikke forteller deg hele sannheten når de svarer på spørreundersøkelsesspørsmålene dine.

de kan villede deg om hva de synes om et produkt, skjule sin sanne tro, eller svare ja på alle spørsmål bare fordi de ikke gidder å fylle ut kjedelig undersøkelse.

vanligvis skjer det fordi spørsmål er formulert på en bestemt måte, eller fordi et bestemt svar kan betraktes som mer sosialt akseptabelt.

oftest forekommer det når folk blir bedt om å rapportere om atferd i undersøkelser og strukturerte intervjuer, men det kan også være et resultat av dårlig formdesign.

Skjevheter er ikke alltid tilsiktet. De kan være tilfeldig eller underbevisst og forårsaket av en rekke interne og eksterne faktorer, inkludert:

• Hvordan du frase spørsmål
• hvordan du gjennomfører undersøkelsen
• Undersøkelsesdesign/format
• forskerens oppførsel (personlig)
• en respondents ønske om å være et godt emne
• Tretthet
• Vanlig kjedsomhet

sjansene er du har utøvd respons skjevhet Av dine Egne når du fyller ut elektroniske skjemaer. Noen gang bare klikket “Helt Enig” på hvert spørsmål for å få det gjort? Eller fortalte en hvit løgn for å få deg til å høres bedre ut; kjøligere; smartere?

det er trygt å si at de fleste av oss har. Og mens vi som respondenter ikke tenker på effektene våre svar har, er virkeligheten at det dramatisk påvirker integriteten til dataene som samles inn i den andre enden.

Det er ikke mye du kan gjøre med skjevhetene folk bringer til skjemaet ditt, enten det er personlig eller online. Det er utenfor din rekkevidde. Men i mange tilfeller er responsbias ikke respondentens feil.

Ni av ti ganger får spørreundersøkelsesstrukturen og spørsmålene dem til å svare på den måten de gjør—det kan være for langt, for stygt, eller du kan ha skrevet spørsmålene dine i en stil som leder dem mot spesifikke svar.

det er opp til deg å oppmuntre til mer ærlige og nøyaktige svar ved å formulere og formatere spørreundersøkelsene på riktig måte. Resten er opp til skjebnen, eller for å holde den greske mytologien ballen rullende, Skjebnene.

Hvordan Skjevheter I Spørreundersøkelser Påvirker Dataene Dine

Spørreundersøkelser og spørreskjemaer er verdifulle måter for bedriften din å samle inn data og meninger fra målgruppen din. Men begge verktøyene stole på ærlighet.

når du har gjort det bra, kan du gjøre utdannede vurderinger av den offentlige mening, måle tilfredshet og få verdifull tilbakemelding for å forbedre produktene, tjenestene eller virksomheten din som helhet.

Men når dataene og meningene er falske – når respondentene viser for mye bias-tar det sin makt bort, som å kaste En murstein Av Kryptonitt på Superman ‘ s fang. Da er ikke spørreundersøkelsen verdt papiret den skrives ut på eller skjemabyggeren du brukte til å lage den.

et eksempel på betydningen av undersøkelser

Et godt eksempel er Hollywood-filmindustrien. Basert på den utbredte bruken av meningsmålinger og undersøkelser i media og politikk, hyret studioledere på slutten Av 1930-tallet Den berømte George Gallup for å utvikle en undersøkelsesmetodikk for filmer.

Gallup og hans stab gjennomførte mer enn 5000 undersøkelser for over et dusin studioer og produsenter. Susan Ohmer sier at disse undersøkelsene ” påvirket casting, fortellende struktur og kampanjer av filmer som spenner fra Tatt Av Vinden til Disneys Tegneserier.”

til denne dag er omtrent alle deler av hver større film fortsatt påvirket av undersøkelser, fra Avengers: Infinity War til den nyeste Star Wars. Hvorfor stole på intuisjon når du kan lære nøyaktig hva slags historier, skuespillere, vitser, relasjoner, og selv avslutninger folk ønsker å se?

det er ikke å si at undersøkelser er den eneste driveren av ideer-de er ikke. Men de brukes til å supplere arbeidet gjort av reklamer og er enormt viktig i etableringen av vellykkede filmer og tv-programmer.

Tenk deg Om Disney eller Netflix ikke kontrollerte for responsbias når de undersøkte publikum. De ville få en haug med falske data som førte dem til å lage ting som ingen ønsket. Ingen Tiger King. Ingen ekte krimdokumentarer. Ingen Mandalorian. Skrekk!

Dette er grunnen til at du ønsker å ta i bruk riktig spørreundersøkelsesmetodikk og ha prosesser på plass for å minimere responsbias så mye som mulig – for å få innsikt som faktisk er nøyaktig og verdifull for bedriften din.

Typer Response Bias

Forstå hvordan response bias skjer er det første skrittet for å minimere effektene. La oss ta en titt på de mest utbredte formene for skjevhet, slik at du kan gjenkjenne hver enkelt og hindre dem i å ødelegge resultatene fra spørreundersøkelsen.

Samtykke Skjevhet

Samtykke skjevhet (også kjent som “avtale skjevhet”) er en type skjevhet der folk har en tendens til å være enig med en uttalelse eller svare “ja” på et ja/nei spørsmål uavhengig av hva de tror.

Hvorfor skjer dette? Fordi ubevisst eller ikke, liker de fleste å bli sett på som høflige og sympatiske (og våre minner er super upålitelige.) Folk har også en tendens til å lete etter informasjon fra sine egne erfaringer for å støtte et positivt svar.

Advokater håndtere dette ofte når avhør et vitne. Hvis de stiller et spørsmål som “Har mannen en blå skjorte på?”, selv om personen ikke husker, forteller data oss at folk er mer sannsynlig å si ja enn nei.

det samme gjelder når du stiller spørsmål som krever at respondentene enten er helt enige eller sterkt uenige med en uttalelse—de er mer sannsynlig å være enige.

så hva kan du gjøre med det? Vel, den beste måten å unngå samtykke er ved å inkludere motstridende uttalelser for å teste nøyaktigheten av svarene. Presentere en uttalelse, deretter følge opp med en annen. Ol ‘ switcharoo.

hvis respondenten er enig med begge motstridende uttalelser, forteller den deg at deres svar ikke er helt nøyaktige. Finner dette skjer ofte? Tenk på hvordan du kan reframe spørsmålet for å gjøre det mer engasjerende og personlig.

Etterspørselskarakteristikker

begrepet etterspørselskarakteristikk ble laget av forskere i psykologi som fant at fagene deres danner ideer om et eksperimentets formål Og ubevisst justerte deres oppførsel for å passe til den tolkningen.

denne skjevheten gjelder for enhver form for forskning. Enten det er et eksperiment, en undersøkelse eller et spørreskjema, har folk en tendens til å prøve å finne ut hva målet er, slik at de kan gi det “riktige” svaret i sammenheng med studien din.

det er noen få hovedkrav som kan påvirke svarene:

• Rykter. Hvis respondentene hører informasjon (enten det er sant eller usant) om undersøkelsen eller spørreskjemaet fra eksterne kilder. For eksempel kan de høre fra en venn at for å fylle ut en kundeserviceundersøkelse med positive svar, mottok de et gavekort.
• Innstilling. Plasseringen undersøkelsen er utført i kan ha en innflytelse, samt merke eller selskap gjennomføre undersøkelsen. Hvis respondentene blir bedt om å fullføre en undersøkelse Ved Harvard University, er sjansene de vil bli påvirket av innstillingen av institusjonen.
• Kommunikasjon. Enhver form for kommunikasjon mellom deltakerne og personen som gjennomfører undersøkelsen (verbal eller ikke-verbal) kan påvirke hvordan de svarer på undersøkelsen. For eksempel, hvis du spøkte om å straffe dem for “feil” svar.

prominente psykologer Thomas Cook og Stephen Weber, skrev at deltakerne har en tendens til å vedta en av fire roller. Disse ble laget i referanse til eksperimenter, men gjelder også for undersøkelser og spørreskjemaer. De er:

Kort for å gi opp, hvordan unngår du etterspørsel egenskaper skjevhet? Vel, det beste å gjøre er å redusere menneskelig kontakt(SIDEN COVID-19 er vi alle vant til det nå uansett).

Å gjennomføre undersøkelser ansikt til ansikt fører ofte til at landmåleren utilsiktet avslører ting gjennom kroppsspråk, reaksjoner eller bare småprat. Ved å bruke online undersøkelser kan du ta ut den menneskelige element og banke etterspørsel egenskaper skjevhet på hodet.

Ekstreme Og Nøytrale Svar

vi kjenner alle historien Om Gullhår og De Tre Bjørnene? Goldilocks popper inn i et hus og prøver grøten (en merkelig ting å gjøre). Den første er for varm, den andre er for kald, og den tredje er juuuuust riktig.

Tenk på ekstrem respons skjevhet som de to første boller av grøt-det refererer til når respondentene gir alle super positive eller super negative svar, uten mellomting.

en nøytral respons er når folk velger hva det midterste alternativet er, noe som ikke er så ekstremt, er like unhelpful for undersøkelsesresultatene dine.

Begge disse skjevhetene skje mye med når undersøkelser krever folk til å rangere noe på en skala. For Eksempel, En Semantisk Differensial Eller Likert Skala som ber kundene om å rangere kundeservice fra 1-10 eller fra ” veldig misfornøyd “til”veldig fornøyd”.

det kan være flere årsaker til denne typen svar, blant annet utdanning, kultur, likegyldighet overfor undersøkelsen eller ordlyden i spørsmålene dine. I vår erfaring (og vi håndterer mange undersøkelser) kommer det ofte ned til vanlig kjedsomhet.

prøv å holde spørreundersøkelser korte for å unngå ekstreme eller nøytrale responsforskjeller. Jo lenger undersøkelsen går, desto mer sannsynlig er respondentene å bli trette eller begynne å miste interessen (akkurat som ET TV-show eller En Christopher Nolan-film).

Prøv å kutte ned mengden tilgjengelige svar på skala spørsmål— du tror kanskje at å gi flere alternativer er nyttig, men for mange valg gjør bare folk fryse opp. Det er en delikat balanse som pre-testing kan hjelpe deg med å finne.

det viktigste er at du bruker interaktive elementer i hele spørreundersøkelsen for å sikre at respondentene er engasjert. Bruk knappanimasjoner, tilpass farger og skrifter, sett inn bilder og videoer, eller bruk verktøy som Paperforms Guided Mode for å lage en distinkt oppslukende opplevelse brukerne vil elske.

Sosial Ønskelighet Bias

I Ordene Til George Costanza, ” vi lever i et samfunn du vet?”. Og som en del av et samfunn vil de fleste bli sett på som noen som tenker, sier og gjør det som er sosialt ønskelig.

denne typen responsskjevhet refererer til når folk svarer på en undersøkelse med svar som de føler er ønskelige, og unngår å gi uønskede svar, uansett deres følelser om et emne.

Ved første øyekast høres det litt ut som samtykke, men forskjellen er at det ikke handler om å appease intervjueren-det handler om å leve opp til samfunnsstandarder og kulturelle forventninger.

for eksempel er vi alle betinget fra barndommen at narkotikabruk ikke er akseptabelt. Hvis du skulle spørre “tror du det er akseptabelt å ta rekreasjonsdroger?”, de fleste folk vil si nei, til tross for hva de faktisk kan tenke eller gjøre.

folk gjenkjenner hva det sosialt passende svaret er, og gir det uavhengig av deres virkelige mening. Det sier seg selv at denne typen falsk rapportering påvirker verdien og brukervennligheten til dataene du har samlet inn.

for å unngå sosial ønskelighet skjevhet prøve å validere respondentenes svar med flere spørsmål. Spør oppfølginger som er motstridende for å hjelpe deg med å gjenkjenne når svarene deres er unøyaktige, og prøv å sørge for at spørsmålene dine ikke fører fag mot noen spesielle svar.

fremfor Alt, gjør ditt beste for å få respondentene til å føle at det ikke finnes noen” riktige ” svar. Dette kan gjøres ved å legge til en kort ansvarsfraskrivelse i starten av undersøkelsen. Du kan også gjøre undersøkelser anonyme, noe som er en enkel måte å oppmuntre ærlige svar på.

Spørsmålsordre-Skjevhet

spørreundersøkelsesskjevhet handler ikke bare om hvilke spørsmål du stiller eller måten du stiller dem på, men også om rekkefølgen du stiller dem i. Det er to typer spørsmål for bias: kontrast og assimilering.

Kontrasteffekter er hvor rekkefølgen på spørsmål fører til større forskjeller i svar. Assimileringseffekter er hvor svarene er mer like som følge av deres rekkefølge.

Kontrasteffekter er eksemplifisert i en nylig studie av personer som mottar offentlige tilskudd bestilt av Sosialstyret i Danmark. Fordi beslutningstakere stoler på tilfredshetsundersøkelser for å informere budsjetter og beslutninger, ønsket de å finne ut hvordan spørsmålsordre påvirker tilfredshetsnivåer.

de fant at når de ble spurt om total tilfredshet før noen spesifikke tjenester, uttrykte folk langt lavere tilfredshetsnivå. Når de ble spurt om spesifikke tjenester først, var den generelle tilfredsheten mye høyere-selv hos personer med høyt utdanningsnivå og erfaring med undersøkelsesforskningsmetoder.

Så hva betyr dette for oss ikke-akademikere? Det betyr at respondentene har en tendens til å gi svar i samsvar med sine tidligere svar. Derfor er det så viktig å tenke på hvordan du utformer spørreundersøkelsene dine, i stedet for å bare slå et par spørsmål sammen og kalle det en dag.

selv grunnleggende spørsmål kan påvirke hverandre. For eksempel, hvis du spør folk hva slags brus er deres favoritt og deretter spør hva deres favoritt drikke er, de fleste folk vil si brus.

dette kalles priming— og det er en måte å få folk ubevisst til å tenke på noe for å påvirke svarene sine. Den brukes på alle slags utrolige måter, for det meste av skumle advokater I TV-programmer, og det er noe du vil unngå.

det er tre hovedmåter å bekjempe spørsmål for bias:

• start bredt. I de fleste tilfeller hjelper det å starte med generelle spørsmål som blir mer spesifikke etter hvert som undersøkelsen utvikler seg. Det lar respondentene bli komfortable, legger til en flyt i undersøkelsen og kutter ned på responsbias.
• Randomiser. Randomisering av rekkefølgen av ikke-relaterte spørsmål er en enkel måte å redusere bias på. Bare randomisere spørsmål som ikke trenger å bli spurt sammen, som “hva er din favoritt farge?”og” hva er ditt favoritt videospill ?”.
• Grupperelaterte spørsmål. Respondentene forventer at relaterte spørsmål skal vises i de samme avsnittene. Men det betyr ikke at de må være i samme rekkefølge. Du kan gruppere relaterte spørsmål og endre rekkefølgen i denne blokken for å redusere skjevhet og fortsatt holde ting organisert.

Randomisering er den mest effektive måten å redusere spørsmål for skjevhet, men det er på ingen måte en one-size-fits-all løsning. Noen ganger må spørsmål stilles i en bestemt rekkefølge for å gi mening, eller for å nå dine mål.

Stol på instinktene dine. Mesteparten av tiden er en bevissthet om potensielle responsforskjeller det første skrittet for å motstå dem.

Bias Bonus! Frafallsbias

Sist, Men definitivt ikke minst, er frafallsbias. I motsetning til hva det ser ut, er dette egentlig ikke det motsatte av responsbias. Det er et begrep som brukes når respondenter enten er 1) ute av stand til eller 2) uvillige til å svare på spørreundersøkelsen din.

Vanligvis er Dette av noen grunner:

• deres meninger er ute av tråd med målgruppen
• undersøkelsen nådde ikke rett respondent
• feil målgruppe ble målrettet

mesteparten av tiden frafallsforskjeller (eller som deltakelsesskjevhet) skjer fordi undersøkelsen er dårlig konstruert, eller fordi feil personer ble målrettet.

for eksempel vil en undersøkelse som spør tenåringer om det beste sigarettmerket ikke få mange svar med mindre Du hopper I En DeLorean og reiser tilbake til 1985.

med spørreundersøkelser på nettet er det ofte en enklere grunn til frafallsbias: spam. Hvis du sender en e-post og den blir sendt til spam-mappen, vil potensielle respondenter ikke se den, og deres manglende svar vil påvirke dataene dine.

Ikke-respons bias forlater deg i ganske pickle. Hvis du ikke er forsiktig, kan det skje resultatene av forskningen din, føre til ufullstendige resultater og spille alle slags spill med estimatene dine siden prøvestørrelsen var annerledes enn forventet.

for å unngå det, må du sørge for at spørreundersøkelser er korte, enkle å svare på og faktisk sendes til riktig publikum (ikke til spammappen deres.) Bruk lukkede spørsmål som er enklere å fylle ut, og unngå dobbeltfylte spørsmål, da de kan motvirke folk fra å svare.

Hvordan Unngå Responsbias I Spørreundersøkelsene Dine

Vi har vært gjennom de viktigste responsbiasene Og hvordan du kan unngå Dem. Men la oss ta en titt på flere strategier du kan bruke for å holde spørreundersøkelsesdataene biasfrie.

Ord dine spørsmål omhyggelig

i filmen 300 forteller Den Spartanske Kongen Leonidas En persisk budbringer å “velge dine neste ord klokt”. Det samme gjelder for undersøkelsene dine. Spørsmålsformulering er en av de viktigste delene av undersøkelsesprosessen.

måten du ord dine spørsmål kan svaie svar og drepe noen sjanse du har for å samle nøyaktige data. Når du utfører undersøkelsesforskning, er det super vanlig å ved et uhell bruke ledende spørsmål og ubevisst påvirke resultatene.

de gode eksemplene legger vekt på respondenten, mens de dårlige antar at respondentene allerede føler en viss følelse og oppfordrer dem til å svare negativt. Dette er en vanlig form for responsbias og lett løst med en liten ordlyd justering.

En annen vanlig feil er å gjøre antagelser om respondenter. For eksempel, hvis du skulle spørre “hva gym trener du på?”du antar at alle som tar undersøkelsen, går til treningsstudioet . Dette fremmedgjør respondentene og vil føre til en lavere svarprosent.

en fin måte å navigere på dette problemet er å bruke spørsmålslogikk. Med logikk kan du justere spørsmål basert på tidligere svar, slik at spørreundersøkelsen tilpasses respondentene.

du kan først spørre “går du på treningsstudioet” og sette det opp slik at bare de som svarte “ja” blir spurt hvilket treningsstudio de trener på. Betinget logikk er super enkelt å sette opp Med Paperform-se det i aksjon nedenfor.

tenk på svaralternativene dine 💭

hvis spørreundersøkelsen din bruker flervalgsspørsmål eller inneholder forhåndsdefinerte svar, bør du være forsiktig med alternativene du gir. En av de største feilene folk har en tendens til å gjøre ikke tilbyr nok svaralternativer.

Dette høres kanskje ikke ut som en stor avtale, men når folk ikke ser et svar de forbinder med, har de en tendens til å velge et gammelt svar fra alternativene. Dette er en form for ekstrem respons—og fører til unøyaktige svar på spørreundersøkelser.

Si at du gjør markedsundersøkelser for å måle den mest populære sosiale medieplattformen blant de 18-24 årene demografiske, men du forlater Twitter.

det betyr at folk som vil svare På “Twitter”, enten vil være nonrespondents, eller bli tvunget til å velge et svar som er nærmest det de virkelig vil si. Dette fungerer ikke for deg eller dine respondenter, og er en tapt situasjon for begge parter.

for å unngå at dette skjer, prøv å tilby nok svarvalg. Dette er enkelt for generelle vilkår, men hvis ting er mer komplekse eller brede, bør du vurdere å legge til et” Annet ” alternativ med spot for respondentene å skrive inn egen tekst.

der det er mulig, kan du også legge til et” jeg vet ikke ” alternativ. Noen deltakere vil ikke ha et tilstrekkelig svar på spørsmålet ditt, og i stedet for å tvinge dem til å gi et unøyaktig svar, gi dem muligheten til å si at de ikke har en anelse.

i tillegg til å invitere mer sannferdige svar, kan dette også være et verdifullt datasett av seg selv. Hvis du ser en haug med” jeg vet ikke ” svar dukker opp, kan det føre deg til et helt unikt datapunkt du ikke forutse.

gjør leksene dine 📚

før du gjør noen form for undersøkelse, må du gjøre din forskning. Sett sammen all informasjon, meninger og ideer om emnet du kan, så spørsmålene du stiller er så relevante som mulig.

en fin måte å sørge for at du spør de riktige tingene er å slå opp gamle undersøkelser og se hvilke tidligere spørsmål som har blitt spurt om emnet. Se på hva som var (og ikke var) dekket, sjekk resultatene og prøvestørrelsen, og se hvordan du kan nærme emnet fra en annen vinkel.

Du må også komme opp med hvem din demografiske er. Dette påvirker hva du spør og hvordan du spør det. Spør deg selv noen spørsmål:

ikke se etter validering for det du allerede tror på. Akkurat som respondentene har sine skjevheter, har du din også. Approach enhver undersøkelse du utfører som forsker nærmer seg et eksperiment – med et åpent sinn og en aksept for at det de tror kan være galt.

Vurder å gjøre undersøkelser anonyme❓

Å gjøre undersøkelsen anonym er en snarvei til mer nøyaktige data, spesielt hvis du stiller sensitive spørsmål om personlig tro og atferd.

ved å anonymisere en spørreundersøkelse føler respondentene seg automatisk komfortable med å gi mer sannferdige svar. Bare vær sikker på at hvis du går denne ruten, for å være klar over deres anonymitet, og aldri forråde tilliten til respondentene.

Dette er en ideell strategi for ting som kundetilfredshetsundersøkelser, og undersøkelser om arbeidsplasskultur eller tilbakemeldinger fra ansatte. Ingen av disse virkelig krever personlig identifikasjon og respondentene føler seg tryggere å vite at de ikke vil bli dømt for sine svar.

Over Til Deg

Respondenter går inn i hver undersøkelse med noe element av bias. De er som cowboyen i en gammel vestlig vandring inn i en salong, bortsett fra at det ikke er en pistol de bruker, det er forstyrrelser av enhver form og størrelse.

men å gjøre det du kan for å redusere sannsynligheten for skjevhet på slutten gjør en verden av forskjell til nøyaktigheten av resultatene. Tross alt er selv den beste undersøkelsen bare så god som innsikten den gir.

hvorfor ikke begynne å lage en spørreundersøkelse med Paperform i dag? Bygg en fra bunnen av eller velg fra 500 + maler og kom i gang umiddelbart. Vi har alle verktøyene du trenger for å lage engasjerende spørreundersøkelser som folk liker å fylle ut.

gi det en sjanse i dag med vår 14-dagers gratis prøveversjon-ingen kredittkort kreves.