de 5 mest skadelige Undersøgelsesresponsforstyrrelser (og hvordan man undgår dem)

os mennesker kan lide at tro, at vi er helt rationelle væsener, men sandheden er, at ingen af os er logiske hundrede procent af tiden.

selv Apollo—den græske gud for logik og rationel tanke—gjorde alle mulige irrationelle ting, som da han udfordrede mennesker til musikkonkurrencer eller prøvede så hårdt at forføre Daphne, at hun blev til et laurbærtræ for at undslippe ham. (Myter er underlige .)

vores irrationalitet gør os menneskelige. Og en del af denne irrationalitet er de tusinder af forstyrrelser, der løber gennem vores hoveder, påvirker vores tænkning, danner vores tro, og påvirker hvert minuts beslutning og dom, vi træffer dagligt.

Bias er overalt. Og den mest betydningsfulde form for it i undersøgelser og forskning er response bias. Det svinger resultater og påvirker dataindsamlingens kvalitet, det meste af tiden, uden at du selv ved det.

det er umuligt helt at fjerne fordomme. De er som Myg i den australske sommer-du kan aldrig rigtig slippe af med dem, du kan bare gøre dit bedste for at minimere deres indvirkning.

i denne omfattende vejledning skitserer vi de trin, du kan tage for at sikre, at du gør alt, hvad du kan for at undgå responsforstyrrelse og indsamle nøjagtige data.

Hvad Er Response Bias?

responsbias er et udtryk for, hvornår respondenterne ikke fortæller dig den fulde sandhed, når de besvarer dine spørgeundersøgelsesspørgsmål.

de kan vildlede dig om, hvad de synes om et produkt, skjule deres sande tro eller svare ‘ja’ på hvert spørgsmål, bare fordi de ikke gider at udfylde din kedelige undersøgelse.

normalt sker det, fordi spørgsmål formuleres på en bestemt måde, eller fordi et bestemt svar kan betragtes som mere socialt acceptabelt.

oftest forekommer det, når folk bliver bedt om selv at rapportere om adfærd i undersøgelser og strukturerede samtaler, men det kan også være et resultat af dårlig formdesign.

fordomme er ikke altid forsætlige. De kan være utilsigtede eller underbevidste og forårsaget af en masse interne og eksterne faktorer, herunder:

• hvordan du sætter spørgsmål
• hvordan du gennemfører undersøgelsen
• undersøgelsesdesign/format
• forskerens opførsel (personligt)
• en respondents ønske om at være et godt emne
• træthed
• almindelig kedsomhed

chancerne er, at du har udøvet din egen responsforstyrrelse, når du udfylder onlineformularer. Har du lige klikket på” stærkt enig ” på hvert spørgsmål for at få det gjort? Eller fortalte en hvid løgn for at få dig til at lyde bedre; køligere; smartere?

det er sikkert at sige de fleste af os har. Og mens vi som respondenter ikke tænker på de effekter, vores svar har, er virkeligheden, at det dramatisk påvirker integriteten af de indsamlede data i den anden ende.

der er ikke meget, du kan gøre ved de forstyrrelser, folk bringer til din form, hvad enten det er personligt eller online. Det er uden for din rækkevidde. Men i mange tilfælde er responsforstyrrelse ikke dine respondenters skyld.

ni ud af ti gange får din undersøgelsesstruktur og spørgsmål dem til at svare, som de gør—det kan være for langt, for grimt, eller du har måske skrevet dine spørgsmål i en stil, der fører dem mod specifikke svar.

det er op til dig at tilskynde til mere ærlige og præcise svar ved at formulere og formatere dine undersøgelser på den rigtige måde. Resten er op til skæbnen, eller for at holde den græske mytologikugle rullende, skæbnen.

hvordan Bias i spørgeundersøgelser påvirker dine Data

undersøgelser og spørgeskemaer er værdifulde måder for din virksomhed at indsamle data og meninger fra din målgruppe. Men begge værktøjer er afhængige af ærlighed.

når det gøres godt, giver undersøgelser dig mulighed for at foretage uddannede vurderinger af den offentlige mening, måle tilfredshed og få værdifuld feedback for at forbedre dine produkter, tjenester eller din virksomhed som helhed.

men når data og meninger er falske—når respondenterne udviser for meget bias—tager det deres magt væk, som at kaste en mursten af kryptonit på Supermans skød. Så er din spørgeundersøgelse ikke det papir værd, den er trykt på, eller den formularbygger, du brugte til at oprette den.

et eksempel på betydningen af undersøgelser

et godt eksempel er filmindustrien. Baseret på den udbredte vedtagelse af afstemninger og undersøgelser i medier og politik hyrede studieledere i slutningen af 1930 ‘ erne den berømte George Gallup til at udvikle en undersøgelsesmetode til film.

Gallup og hans personale gennemførte mere end 5.000 undersøgelser for over et dusin studier og producenter. Susan Ohmer siger, at disse undersøgelser ” påvirkede casting, fortællingsstruktur, og reklamekampagner for film lige fra Borte med blæsten til Disneys tegnefilm.”

den dag i dag er næsten alle dele af alle større film stadig påvirket af undersøgelser, fra Avengers: uendelig krig til de seneste Stjernekrige. Hvorfor stole på intuition, når du kan lære nøjagtigt, hvilken type historier, skuespillere, vittigheder, relationer, og endda slutninger folk vil se?

det er ikke at sige, at undersøgelser er den eneste drivkraft for ideer—de er ikke. Men de er vant til at supplere det arbejde, der udføres af reklamer og er enormt vigtige i skabelsen af succesrige film og tv-udsendelser.

Forestil dig, om Disney ikke kontrollerede for responsbias, når de undersøgte deres målgrupper. De ville få en masse falske data, der førte dem til at lave ting, som ingen ønskede. Ingen Tiger Konge. Ingen ægte kriminaldokumentarer. Ingen Mandalorianer. Rædslen!

derfor vil du anvende den rigtige undersøgelsesmetode og have processer på plads for at minimere responsbias så meget som muligt—for at få indsigt, der faktisk er nøjagtig og værdifuld for din virksomhed.

typer af Responsforstyrrelse

at forstå, hvordan responsforstyrrelse sker, er det første skridt til at minimere dens virkninger. Lad os se på de mest udbredte former for bias, så du kan genkende hver enkelt og forhindre dem i at ødelægge dine undersøgelsesresultater.

samtykke Bias

samtykke bias (også kendt som “aftale bias”) er en type bias, hvor folk har tendens til at være enige med en erklæring eller svare “ja” til et ja/nej spørgsmål uanset hvad de tror.

hvorfor sker dette? Fordi ubevidst eller ej, kan de fleste lide at blive set som høflige og sympatiske (og vores minder er super upålidelige.) Folk har også en tendens til at lede efter information fra deres egne oplevelser for at understøtte et positivt svar.

advokater behandler dette ofte, når de afhører et vidne. Hvis de stiller et spørgsmål som ” havde manden en blå skjorte på?”, selvom personen ikke kan huske, fortæller data os, at folk er mere tilbøjelige til at sige ja end Nej.

det samme gælder, når du stiller spørgsmål, der kræver, at respondenterne enten er stærkt enige eller stærkt uenige i en erklæring—de er mere tilbøjelige til at være enige.

så hvad kan du gøre ved det? Godt, den bedste måde at undgå samtykke bias er ved at inkludere modstridende udsagn for at teste nøjagtigheden af svarene. Præsenter en erklæring, og følg derefter op med en anden. Ol ‘ omskifteren.

hvis respondenten er enig i begge modstridende udsagn, fortæller den dig, at deres svar ikke er helt korrekte. Find dette sker ofte? Tænk på, hvordan du kan omformulere spørgsmålet for at gøre det mere engagerende og personligt.

efterspørgselsegenskaber Bias

udtrykket ‘efterspørgselskarakteristik’ blev opfundet af forskere i psykologi, der fandt, at deres emner dannede ideer om et eksperiments formål og ubevidst justerede deres adfærd for at passe til denne fortolkning.

denne bias gælder for enhver form for forskning. Uanset om det er et eksperiment, en undersøgelse eller et spørgeskema, har folk en tendens til at prøve at finde ud af, hvad dens mål er, så de kan give det “rigtige” svar inden for rammerne af din undersøgelse.

der er et par vigtigste efterspørgselsegenskaber, der kan påvirke svarene:

• rygter. Hvis respondenterne hører oplysninger (uanset om de er sande eller falske) om undersøgelsen eller spørgeskemaet fra eksterne kilder. For eksempel kan de høre fra en ven, at de for at udfylde en kundeserviceundersøgelse med positive svar modtog et gavekort.
• indstilling. Den placering, undersøgelsen udføres i, kan have indflydelse, såvel som det brand eller firma, der gennemfører undersøgelsen. Hvis respondenterne bliver bedt om at gennemføre en undersøgelse på Harvard University, er chancerne for, at de vil blive påvirket af institutionens indstilling.
• kommunikation. Enhver form for kommunikation mellem deltagerne og den person, der gennemfører undersøgelsen (verbal eller ikke-verbal) kan påvirke, hvordan de reagerer på din undersøgelse. For eksempel, hvis du spøgte med at straffe dem for det “forkerte” svar.

fremtrædende psykologer Thomas Cook og Stephen Uber, skrev, at deltagerne har tendens til at vedtage en af fire roller. Disse blev opfundet med henvisning til eksperimenter, men gælder også for undersøgelser og spørgeskemaer. De er:

kort for at give op, Hvordan undgår du efterspørgselsegenskaber bias? Den bedste ting at gøre er at reducere menneskelig kontakt (siden COVID-19 er vi alle vant til det nu alligevel).

gennemførelse af undersøgelser ansigt til ansigt fører ofte landmåleren til utilsigtet at afsløre ting gennem kropssprog, reaktioner eller bare small talk. Ved at bruge online undersøgelser kan du tage det menneskelige element ud og banke efterspørgselsegenskaber bias på hovedet.

ekstreme og neutrale svar

vi kender alle historien om Goldilocks og de tre bjørne? Goldilocks dukker ind i et hus og prøver grød (en underlig ting at gøre). Den første er for varm, den anden er for kold, og den tredje er juuuuust ret.

tænk på ekstrem responsforstyrrelse som de to første skåle grød— det refererer til, når respondenterne giver alle super positive eller super negative svar uden mellemgrund.

et neutralt svar er, når folk vælger, hvad den midterste mulighed er, hvilket, selvom det ikke er så ekstremt, er lige så nyttigt for dine undersøgelsesresultater.

begge disse forstyrrelser sker meget med, når undersøgelser kræver, at folk vurderer noget på en skala. For eksempel en semantisk Differential-eller Likert-skala, der beder kunderne om at rangere kundeservice fra 1-10 eller fra “meget utilfreds” til “meget tilfreds”.

der kan være et par grunde til disse typer svar, herunder uddannelse, kultur, ligegyldighed over for undersøgelsen eller ordlyden af dine spørgsmål. I vores erfaring (og vi beskæftiger os med masser af undersøgelser) oftest kommer det ned til almindelig kedsomhed.

for at undgå ekstrem eller neutral responsforstyrrelse, prøv at holde undersøgelser korte. Jo længere din undersøgelse går, jo mere sandsynligt er respondenterne at blive trætte eller begynde at miste interessen (ligesom et tv-program eller en Christopher Nolan-film).

prøv at skære ned på mængden af tilgængelige svar til skala spørgsmål— du tror måske, at det er nyttigt at give flere muligheder, men for mange valg får bare folk til at fryse op. Det er en delikat balance, som præ-test kan hjælpe dig med at finde.

vigtigst er det, at du bruger interaktive elementer i hele din spørgeundersøgelse for at sikre, at respondenterne er engagerede. Brug knapanimationer, Tilpas farver og skrifttyper, Indsæt billeder og videoer, eller brug værktøjer som Paperforms guidede tilstand til at skabe en tydelig fordybende oplevelse, som brugerne vil elske.

Social ønskværdighed Bias

med George Costans ord, ” vi lever i et samfund, du kender?”. Og som en del af et samfund, de fleste mennesker ønsker at blive set som en person, der tænker, siger og gør, hvad der er socialt ønskeligt.

denne type responsforstyrrelse refererer til, når folk reagerer på en undersøgelse med svar, som de føler er ønskelige, og undgår at give ‘uønskede’ svar, uanset deres følelser om et emne.

ved første øjekast lyder det lidt som accept bias, men forskellen er, at det ikke handler om at formilde samtaleren—det handler om at leve op til samfundsmæssige standarder og kulturelle forventninger.

for eksempel er vi alle betinget af barndommen, at stofbrug ikke er acceptabelt. Hvis du skulle spørge ” tror du det er acceptabelt at tage rekreative stoffer?”de fleste mennesker ville sige nej, på trods af hvad de faktisk kan tænke eller gøre.

folk anerkender, hvad det socialt passende svar er, og giver det uanset deres reelle mening. Det siger sig selv, at denne form for falsk rapportering påvirker værdien og anvendeligheden af de data, du har indsamlet.

for at undgå social ønskværdighed, prøv at validere respondenternes svar med flere spørgsmål. Spørg opfølgninger, der er modstridende for at hjælpe dig med at genkende, når deres svar er unøjagtige, og prøv at sikre, at dine spørgsmål ikke fører emner mod bestemte svar.

frem for alt skal du gøre dit bedste for at få respondenterne til at føle, at der ikke er nogen “rigtige” svar. Dette kan gøres ved at tilføje en kort ansvarsfraskrivelse i starten af undersøgelsen. Du kan også gøre undersøgelser anonyme, hvilket er en enkel måde at tilskynde til ærlige svar på.

spørgsmål Order Bias

Survey bias handler ikke kun om, hvilke spørgsmål du stiller, eller hvordan du stiller dem, det kan handle om den rækkefølge, du stiller dem i. Der er to typer af spørgsmål ordre bias: kontrast og assimilation.

kontraster effekter er, hvor rækkefølgen af spørgsmål fører til større forskelle i svar. Assimilationseffekter er, hvor svarene er mere ens som følge af deres rækkefølge.

Kontrasteffekter er eksemplificeret i en nylig undersøgelse af personer, der modtager offentlige tilskud bestilt af Socialstyrelsen i Danmark. Da beslutningstagere er afhængige af tilfredshedsundersøgelser for at informere budgetter og beslutninger, ønskede de at finde ud af, hvordan spørgsmålsordren påvirker tilfredshedsniveauerne.

de fandt ud af, at når de blev spurgt om generel tilfredshed før nogen specifikke tjenester, udtrykte folk langt lavere tilfredshedsniveauer. Når man først blev spurgt om specifikke tjenester, var den samlede tilfredshed meget højere—selv hos mennesker med højt uddannelsesniveau og erfaring med undersøgelsesforskningsmetoder.

så hvad betyder det for os ikke-akademikere? Det betyder, at respondenterne har tendens til at give svar i overensstemmelse med deres tidligere svar. Derfor er det så vigtigt at tænke på den måde, du designer dine undersøgelser på, snarere end bare at slå et par spørgsmål sammen og kalde det en dag.

selv grundlæggende spørgsmål kan påvirke hinanden. For eksempel, hvis du spørger folk, hvilken type læskedrik der er deres favorit og derefter spørger, hvad deres yndlingsdrink er, vil de fleste sige læskedrik.

dette kaldes priming— og det er en måde at få folk ubevidst til at tænke på noget for at påvirke deres svar. Det bruges i alle mulige lusket måder, for det meste af sjuskede advokater i TV-udsendelser, og det er noget, du ønsker at undgå.

der er tre vigtigste måder at bekæmpe spørgsmål ordre bias:

• start bredt. I de fleste tilfælde hjælper det med at starte med generelle spørgsmål, der bliver mere specifikke, efterhånden som undersøgelsen skrider frem. Det lader respondenterne få komfortable, tilføjer en strøm til undersøgelsen og skærer ned på respons bias.
• randomisere. Randomisering af rækkefølgen af ikke-relaterede spørgsmål er en enkel måde at reducere bias på. Randomiser kun spørgsmål, der ikke behøver at blive stillet sammen, som “hvad er din yndlingsfarve?”og” hvad er dit yndlings videospil?”.
• Grupperelaterede spørgsmål. Respondenterne forventer, at relaterede spørgsmål vises i de samme sektioner. Men det betyder ikke, at de skal være i samme rækkefølge. Du kan gruppere relaterede spørgsmål og ændre rækkefølgen inden for denne blok for at reducere bias og stadig holde tingene organiseret.

randomisering er den mest effektive måde at reducere spørgsmålsordreforstyrrelse på, men det er på ingen måde en løsning, der passer til alle. Nogle gange skal spørgsmål stilles i en bestemt rækkefølge for at give mening eller for at nå dine mål.

Stol på dine instinkter. Det meste af tiden er en bevidsthed om potentielle responsforstyrrelser det første skridt til at modstå dem.

Bias Bonus! Non-Response Bias

sidst, men absolut ikke mindst, er non-response bias. I modsætning til hvad det ser ud, er dette faktisk ikke det modsatte af responsbias. Det er et udtryk, der bruges til, når respondenterne enten er 1) ude af stand til eller 2) uvillige til at svare på din spørgeundersøgelse.

normalt er dette af nogle få grunde:

• deres meninger er ude af linje med målgruppen
• undersøgelsen nåede ikke den rigtige respondent
• den forkerte målgruppe blev målrettet

det meste af tiden ikke-responsbias (eller som deltagelsesforstyrrelse) sker, fordi din undersøgelse er dårligt konstrueret, eller fordi de forkerte mennesker blev målrettet.

for eksempel vil en undersøgelse, der spørger teenagere om det bedste cigaretmærke, ikke få mange svar, medmindre du hopper i en DeLorean og rejser tilbage til 1985.

med onlineundersøgelser er der ofte en enklere grund til manglende respons bias: spam. Hvis du sender en e-mail, og den sendes til spam-mappen, kan potentielle respondenter ikke se den, og deres manglende svar påvirker dine data.

manglende respons bias efterlader dig i helt pickle. Hvis du ikke er forsigtig, kan det skæve resultaterne af din forskning, føre til ufattelige resultater og spille alle mulige spil med dine estimater, da stikprøvestørrelsen var anderledes end forventet.

for at undgå det skal du sørge for, at undersøgelser er korte, lette at svare på og faktisk sendes til det rigtige publikum (ikke til deres spam-mappe.) Brug lukkede spørgsmål, der er mere ligetil at udfylde, og undgå dobbeltløbede spørgsmål, da de kan afskrække folk fra at svare.

Sådan undgår du Responsbias i dine undersøgelser

vi har været igennem de store responsbias, og hvordan du kan undgå dem. Men lad os se på yderligere strategier, du kan bruge til at holde dine undersøgelsesdata bias-fri.

Skriv dine spørgsmål omhyggeligt til dig, Peter

i filmen 300 fortæller den spartanske konge, Leonidas, en persisk budbringer at “vælge dine næste ord klogt”. Det samme gælder for dine undersøgelser. Spørgsmålsformulering er en af de vigtigste dele af undersøgelsesoprettelsesprocessen.

den måde, du ord dine spørgsmål kan svaje svar og dræbe enhver chance du har for at indsamle præcise data. Når du udfører undersøgelsesundersøgelser, er det super almindeligt at ved et uheld bruge førende spørgsmål og ubevidst påvirke resultaterne.

de gode eksempler lægger byrden på respondenten, mens de dårlige antager, at respondenterne allerede føler en vis følelse og opfordrer dem til at reagere negativt. Dette er en almindelig form for respons bias og let fast med en lille ordlyden justering.

en anden almindelig fejl er at antage antagelser om respondenter i undersøgelsen. For eksempel, hvis du skulle spørge “hvilket motionscenter træner du på?”du antager, at alle, der tager din undersøgelse, går i gymnastiksalen. Dette fremmedgør respondenterne og vil føre til en lavere svarprocent.

en god måde at navigere på dette problem er at bruge spørgsmålslogik. Logic giver dig mulighed for at justere spørgsmål baseret på tidligere svar, så din spørgeundersøgelse tilpasser sig dine respondenter.

du kunne først spørge “går du i gymnastiksalen” og sætte det op, så kun de, der svarede “Ja”, bliver spurgt, hvilket gym de træner på. Betinget logik er super nemt at sætte op med Paperform-se det i aktion nedenfor.

tænk over dine svarmuligheder

hvis din undersøgelse bruger multiple choice-spørgsmål eller indeholder foruddefinerede svar, skal du være forsigtig med de muligheder, du giver. En af de største fejl folk har tendens til ikke at tilbyde nok svarmuligheder.

dette lyder måske ikke som en big deal, men når folk ikke ser et svar, som de forbinder med, har de en tendens til at vælge et gammelt svar fra indstillingerne. Dette er en form for ekstrem reaktion—og fører til unøjagtige undersøgelsessvar.

sig, at du laver markedsundersøgelser for at måle den mest populære sociale medieplatform blandt de 18-24 år demografiske, men du udelader kvidre.

det betyder, at folk, der ville svare “kvidre”, enten vil være ikke-respondenter eller blive tvunget til at vælge et svar, der er tættest på det, de virkelig vil sige. Dette fungerer ikke for dig eller dine respondenter og er en tab-tab-situation for begge parter.

for at undgå dette sker forsøge at tilbyde nok svar valg. Dette er let for Generelle vilkår, men hvis tingene er mere komplekse eller brede, kan du overveje at tilføje en “anden” mulighed med spot for respondenterne at indtaste deres egen tekst.

hvor det er muligt, kan du også tilføje en “jeg ved ikke” mulighed. Nogle deltagere har ikke et passende svar på dit spørgsmål, og i stedet for at tvinge dem til at give et unøjagtigt svar, giver dem mulighed for at sige, at de ikke har en anelse.

ud over at invitere mere sandfærdige svar kan dette også være et værdifuldt datasæt for sig selv. Hvis du ser en masse “jeg ved ikke” svar dukker op, kan det føre dig til et helt unikt datapunkt, du ikke forudså.

lav dit hjemmearbejde, som du har brug for for at gøre din forskning. Sammensæt alle de oplysninger, meninger og ideer om det emne, du kan, så de spørgsmål, du stiller, er så relevante som muligt.

en god måde at sikre, at du spørger de rigtige ting, er at slå gamle undersøgelser op og se, hvilke tidligere spørgsmål der er stillet om emnet. Se på, hvad der var (og ikke var) dækket, kontroller resultaterne og stikprøvestørrelsen, og se, hvordan du kan nærme dig emnet fra en anden vinkel.

du skal også finde ud af, hvem din demografiske er. Dette påvirker, hvad du spørger, og hvordan du spørger det. Stil dig selv et par spørgsmål:

søg ikke efter validering for det, du allerede tror på. Ligesom respondenterne i undersøgelsen har deres fordomme, har du også din. Tilnærm enhver undersøgelse, du udfører som videnskabsmand, nærmer sig et eksperiment—med et åbent sind og en accept af, at det, de mener, kunne være forkert.

overvej at gøre spørgeundersøgelser anonyme venstre

at gøre din spørgeundersøgelse anonym er en genvej til mere nøjagtige data, især hvis du stiller følsomme spørgsmål om personlige overbevisninger og adfærd.

ved at gøre en spørgeundersøgelse anonym føler dine respondenter sig automatisk trygge ved at give mere sandfærdige svar. Bare sørg for, hvis du går denne rute, at være klar over deres anonymitet og aldrig forråde respondenternes tillid.

dette er en ideel strategi for ting som kundetilfredshedsundersøgelser og undersøgelser om arbejdspladskultur eller medarbejderfeedback. Ingen af disse kræver virkelig personlig identifikation, og respondenterne føler sig mere sikre ved at vide, at de ikke vil blive bedømt for deres svar.

over til dig

respondenterne går ind i hver undersøgelse med et element af bias. De er som en ko dreng i en gammel vestlig vandrer ind i en salon, bortset fra at det ikke er en pistol, de bærer, det er forstyrrelser af enhver form og størrelse.

men gør hvad du kan for at reducere sandsynligheden for bias på din ende gør en verden til forskel for nøjagtigheden af dine resultater. Når alt kommer til alt er selv den bedste undersøgelse kun så god som den indsigt, den giver.

hvorfor ikke komme i gang med at oprette en undersøgelse med Paperform i dag? Byg en fra bunden eller vælge fra 500+ skabeloner og komme i gang med det samme. Vi har alle de værktøjer, du har brug for til at oprette engagerende, responsfrie spørgeundersøgelser, som folk nyder at udfylde.

giv det en chance i dag med vores 14-dages gratis prøveperiode—intet kreditkort kræves.