de 5 mest skadliga Undersökningsresponsen (och hur man undviker dem)

vi människor tycker om att vi är helt rationella varelser, men sanningen är att ingen av oss är logiska hundra procent av tiden.

även Apollo—den grekiska guden av logik och rationell tanke-gjorde alla möjliga irrationella saker, som när han utmanade människor till musiktävlingar eller försökte så svårt att förföra Daphne att hon förvandlades till ett laurelträd för att undkomma honom. (Myter är konstiga.)

vår irrationalitet gör oss mänskliga. Och en del av den irrationaliteten är de tusentals fördomar som löper genom våra huvuden, påverkar vårt tänkande, bildar vår tro och påverkar varje minuts beslut och dom vi gör dagligen.

Bias är överallt. Och den viktigaste formen av det i undersökningar och forskning är response bias. Det svänger resultat och påverkar datainsamlingskvaliteten, för det mesta, utan att du ens vet det.

det är omöjligt att helt ta bort fördomar. De är som myggor i den australiensiska sommaren-du kan aldrig riktigt bli av med dem, du kan bara göra ditt bästa för att minimera deras inverkan.

i den här omfattande guiden beskriver vi de steg du kan vidta för att se till att du gör allt som står i din makt för att undvika responsförspänning och samla in exakta data.

Vad Är Response Bias?

Response bias är en term för när respondenterna inte berättar hela sanningen när de svarar på dina enkätfrågor.

de kan missvisa dig om vad de tycker om en produkt, dölja sin sanna tro eller svara ja på varje fråga bara för att de inte kan bry sig om att fylla i din tråkiga undersökning.

vanligtvis händer det för att frågor formuleras på ett visst sätt, eller för att ett visst svar kan anses vara mer socialt acceptabelt.

oftast uppstår det när människor uppmanas att själv rapportera om beteenden i undersökningar och strukturerade intervjuer, men det kan också vara ett resultat av dålig formdesign.

fördomar är inte alltid avsiktliga. De kan vara oavsiktliga eller undermedvetna och orsakas av en massa interna och externa faktorer, inklusive:

• hur du fras frågor
• hur du genomför undersökningen
• undersökning design/format
• forskarens uppträdande (personligen)
• en respondent önskan att vara ett bra ämne
• trötthet
• Plain ol’ tristess

chansen är stor att du har utövat egna svarsfördomar när du fyller i onlineformulär. Har du någonsin klickat på “starkt överens” på varje fråga för att få det gjort? Eller berättade en vit lögn för att få dig att låta bättre; svalare; smartare?

det är säkert att säga att de flesta av oss har. Och medan vi som svarande inte tänker på effekterna våra svar har, är verkligheten, det påverkar dramatiskt integriteten hos de data som samlas in i andra änden.

det finns inte mycket du kan göra om de fördomar som folk tar med i din form, oavsett om det är personligen eller online. Det är bortom din räckvidd. Men i många fall är svarsförskjutning inte dina respondenters fel.

nio gånger av tio leder din enkätstruktur och frågor dem att svara på som de gör—det kan vara för långt, för fult, eller du kanske har skrivit dina frågor i en stil som leder dem till specifika svar.

det är upp till dig att uppmuntra mer ärliga och korrekta svar genom att formulera och formatera dina undersökningar på rätt sätt. Resten är upp till ödet, eller för att hålla den grekiska mytologin bollen rullande, öden.

hur Survey Bias påverkar dina Data

undersökningar och frågeformulär är värdefulla sätt för ditt företag att samla in data och åsikter från din målgrupp. Men båda verktygen är beroende av ärlighet.

när du gör det bra kan du göra utbildade bedömningar av den allmänna opinionen, mäta tillfredsställelse och få värdefull feedback för att förbättra dina produkter, tjänster eller ditt företag som helhet.

men när data och åsikter är falska—när respondenterna uppvisar för mycket bias—tar det sin makt bort, som att kasta en tegel av Kryptonit på Supermans knä. Då är din undersökning inte värd det papper den skrivs ut på eller formulärbyggaren du använde för att skapa den.

ett exempel på vikten av undersökningar

ett bra exempel är Hollywood-filmindustrin. Baserat på det utbredda antagandet av omröstningar och undersökningar inom media och politik, anställde studiochefer i slutet av 1930-talet den berömda George Gallup för att utveckla en undersökningsmetodik för filmer.

Gallup och hans personal genomförde mer än 5 000 undersökningar för över ett dussin studior och producenter. Susan Ohmer säger dessa undersökningar ” påverkat gjutning, berättande struktur, och reklamkampanjer av filmer som sträcker sig från Gone with The Wind till Disneys karikatyrerna.”

till denna dag påverkas nästan alla delar av varje större Film fortfarande av undersökningar, från Avengers: Infinity War till de senaste Star Wars. Varför lita på intuition när du kan lära dig exakt vilken typ av berättelser, skådespelare, skämt, relationer, och till och med Slut människor vill se?

det är inte att säga att undersökningar är den enda drivkraften för ideer-de är inte. Men de används för att komplettera det arbete som görs av kreatörer och är enormt viktigt i skapandet av framgångsrika filmer och TV-program.

Föreställ dig om Disney eller Netflix inte kontrollerade för responsbias när de undersökte sin publik. De skulle få en massa falska data som ledde dem att göra saker som ingen ville ha. Ingen Tiger King. Inga riktiga brottsdokumentärer. Ingen Mandalorian. Skräcken!

det är därför du vill anta rätt undersökningsmetodik och ha processer på plats för att minimera responsförspänning så mycket som möjligt—för att få insikter som faktiskt är korrekta och värdefulla för ditt företag.

typer av Responsförspänning

att förstå hur responsförspänning händer är det första steget för att minimera dess effekter. Låt oss ta en titt på de vanligaste formerna av partiskhet så att du kan känna igen var och en och hindra dem från att förstöra dina undersökningsresultat.

samtycke Bias

samtycke bias (även känd som “avtal bias”) är en typ av bias där människor tenderar att hålla med ett uttalande eller svara “ja” på en ja/nej-fråga oavsett vad de tror.

varför händer detta? Eftersom undermedvetet eller inte, tycker de flesta om att ses som artiga och sympatiska (och våra minnen är super opålitliga.) Människor tenderar också att leta efter information från sina egna erfarenheter för att stödja ett positivt svar.

advokater hanterar detta ofta när de förhör ett vittne. Om de ställer en fråga som ” hade mannen en blå skjorta på?”, även om personen inte kommer ihåg, säger data att människor är mer benägna att säga ja än nej.

detsamma gäller när man ställer frågor som kräver att respondenterna antingen håller med eller inte håller med om ett uttalande—de är mer benägna att komma överens.

så vad kan du göra åt det? Tja, det bästa sättet att undvika samtycke är att inkludera motsägelsefulla uttalanden för att testa svarens noggrannhet. Presentera ett uttalande och följ sedan upp med ett annat. Den gamla switcharoo.

om respondenten instämmer i båda motsägelsefulla uttalandena berättar den att deras svar inte är helt korrekta. Hitta detta händer ofta? Tänk på hur du kan omformulera frågan för att göra den mer engagerande och personlig.

Demand Characteristics Bias

termen ‘demand characteristic’ myntades av forskare inom psykologi som fann att deras ämnen bildade tankar om ett experiments syfte och omedvetet anpassade deras beteenden för att passa den tolkningen.

denna bias gäller för alla former av forskning. Oavsett om det är ett experiment, en undersökning eller ett frågeformulär, tenderar folk att försöka lista ut vad målet är så att de kan ge “rätt” svar inom ramen för din studie.

det finns några huvudsakliga efterfrågan egenskaper som kan påverka svar:

• rykten. Om respondenterna hör någon information (om det är sant eller falskt) om undersökningen eller frågeformuläret från externa källor. De kan till exempel höra från en vän att för att fylla i en kundtjänstundersökning med positiva svar fick de ett presentkort.
• inställning. Platsen som undersökningen utförs på kan påverka såväl som varumärket eller företaget som genomför undersökningen. Om respondenterna uppmanas att slutföra en undersökning vid Harvard University, är chansen att de kommer att påverkas av institutionens inställning.
• kommunikation. Alla typer av kommunikation mellan deltagarna och den person som genomför undersökningen (verbal eller icke-verbal) kan påverka hur de svarar på din undersökning. Till exempel, om du skämtade om att straffa dem för “fel” svar.

framstående psykologer Thomas Cook och Stephen Weber, skrev att deltagarna tenderar att anta en av fyra roller. Dessa myntades med hänvisning till experiment, men gäller lika för undersökningar och frågeformulär också. De är:

kort att ge upp, hur undviker du efterfrågan egenskaper bias? Det bästa du kan göra är att minska mänsklig kontakt (sedan COVID-19 är vi alla vana vid det nu ändå).

att genomföra undersökningar ansikte mot ansikte leder ofta till att lantmätaren oavsiktligt avslöjar saker genom kroppsspråk, reaktioner eller bara småprat. Genom att använda online-undersökningar kan du ta ut det mänskliga elementet och slå efterfrågan egenskaper bias på huvudet.

extrema och neutrala svar

vi vet alla historien om Goldilocks och de tre björnarna? Goldilocks dyker in i ett hus och försöker gröt (en konstig sak att göra). Den första är för varm, den andra är för kall, och den tredje är juuuuust rätt.

Tänk på extreme response bias som de första två skålarna gröt— det hänvisar till när respondenterna ger alla superpositiva eller supernegativa svar, utan mellanklass.

ett neutralt svar är när människor väljer vad det mellersta alternativet är, vilket även om det inte är så extremt, är lika ohjälpsamt för dina undersökningsresultat.

båda dessa fördomar händer mycket när undersökningar kräver att människor betygsätter något på en skala. Till exempel en semantisk Differential-eller Likert-skala som ber kunderna att rangordna kundservice från 1-10 eller från “mycket missnöjd” till “mycket nöjd”.

det kan finnas några orsaker till dessa typer av svar, inklusive utbildning, kultur, likgiltighet gentemot undersökningen eller formuleringen av dina frågor. Enligt vår erfarenhet (och vi hanterar många undersökningar) kommer det oftast ner till vanlig ol’ tristess.

för att undvika extrem eller neutral responsförspänning, försök att hålla undersökningarna korta. Ju längre din undersökning går, desto mer sannolikt är respondenterna att bli trötta eller börja förlora intresse (precis som en TV-show eller en Christopher Nolan-film).

försök att minska mängden tillgängliga svar för skalfrågor-du kanske tror att det är bra att ge fler alternativ, men för många val får bara människor att frysa upp. Det är en känslig balans som förtestning kan hjälpa dig att hitta.

viktigast av allt, Använd interaktiva element i hela din undersökning för att se till att respondenterna är engagerade. Använd knappanimationer, anpassa färger och teckensnitt, infoga bilder och videor eller använd verktyg som Paperforms guidade läge för att göra en distinkt uppslukande upplevelse som användarna kommer att älska.

Social önskvärdhet Bias

för att citera George Costanza, ” vi lever i ett samhälle du vet?”. Och som en del av ett samhälle vill de flesta ses som någon som tänker, säger och gör vad som är socialt önskvärt.

denna typ av svarsförskjutning avser när människor svarar på en undersökning med svar som de tycker är önskvärda och undviker att ge ‘oönskade’ svar, oavsett deras känslor om ett ämne.

vid första anblicken låter det lite som samtycke, men skillnaden är att det inte handlar om att lugna intervjuaren—det handlar om att leva upp till samhällsstandarder och kulturella förväntningar.

till exempel är vi alla konditionerade från barndomen att narkotikamissbruk inte är acceptabelt. Om du skulle fråga “tycker du att det är acceptabelt att ta fritidsdroger?”, de flesta skulle säga nej, trots vad de faktiskt kan tänka eller göra.

människor känner igen vad det socialt lämpliga svaret är och ger det oavsett deras verkliga åsikt. Det säger sig självt att denna typ av falsk rapportering påverkar värdet och användbarheten av de data du har samlat in.

för att undvika social önskvärdhet, försök att validera respondenternas svar med flera frågor. Fråga uppföljningar som är motsägelsefulla för att hjälpa dig att känna igen när deras svar är felaktiga och försök att se till att dina frågor inte leder ämnen mot några speciella svar.

framför allt, gör ditt bästa för att få respondenterna att känna att det inte finns några “rätt” svar. Detta kan göras genom att lägga till en kort ansvarsfriskrivning i början av undersökningen. Du kan också göra enkäter anonyma, vilket är ett enkelt sätt att uppmuntra ärliga svar.

fråga Order Bias

Survey bias handlar inte bara om vilka frågor du ställer eller hur du frågar dem, det kan handla om den ordning du frågar dem i. Det finns två typer av frågeordningsförspänning: kontrast och assimilering.

Kontrasteffekter är där ordningen på frågor leder till större skillnader i svar. Assimileringseffekter är där svaren är mer lika som ett resultat av deras ordning.

Kontrasteffekter exemplifieras i en nyligen genomförd studie av personer som får statliga bidrag på uppdrag av Socialstyrelsen i Danmark. Eftersom beslutsfattare förlitar sig på nöjdhetsundersökningar för att informera budgetar och beslut, ville de ta reda på hur frågeordningen påverkar tillfredsställelsesnivåerna.

de fann att när de frågades om övergripande tillfredsställelse före några specifika tjänster uttryckte människor mycket lägre tillfredsställelsesnivåer. På frågan om specifika tjänster först var den totala tillfredsställelsen mycket högre – även hos personer med hög utbildningsnivå och erfarenhet av undersökningsmetoder.

så vad betyder det för oss icke-akademiker? Det betyder att respondenterna tenderar att ge svar som överensstämmer med deras tidigare svar. Det är därför det är så viktigt att tänka på hur du utformar dina undersökningar, snarare än att bara slå ett par frågor tillsammans och kalla det en dag.

även grundläggande frågor kan påverka varandra. Om du till exempel frågar folk vilken typ av läsk som är deras favorit och sedan frågar vad deras favoritdryck är, kommer de flesta att säga läsk.

detta kallas priming— och det är ett sätt att få människor att omedvetet tänka på något för att påverka deras svar. Den används på alla möjliga sätt, mestadels av luddiga advokater i TV-program, och det är något du vill undvika.

det finns tre huvudsakliga sätt att bekämpa frågeordningens bias:

• börja bred. I de flesta fall hjälper det att börja med allmänna frågor som blir mer specifika när undersökningen fortskrider. Det låter respondenterna bli bekväma, lägger till ett flöde i undersökningen och skär ner på svarsförspänning.
• randomisera. Att randomisera ordningen på orelaterade frågor är ett enkelt sätt att minska partiskhet. Bara randomisera frågor som inte behöver ställas tillsammans, som “Vad är din favoritfärg?”och” vad är ditt favoritvideospel?”.
• grupprelaterade frågor. Respondenterna förväntar sig att Relaterade frågor visas i samma avsnitt. Men det betyder inte att de måste vara i samma ordning. Du kan gruppera relaterade frågor och ändra ordningen inom det blocket för att minska partiskhet och ändå hålla saker organiserade.

randomisering är det mest effektiva sättet att minska frågeordningens bias, men det är inte alls en lösning som passar alla. Ibland måste frågor ställas i en viss ordning för att vara vettiga eller för att uppnå dina mål.

lita på dina instinkter. För det mesta är en medvetenhet om potentiella svarsfördomar det första steget för att motstå dem.

Bias Bonus! Non-Response Bias

sist, men definitivt inte minst, är non-response bias. I motsats till vad det ser ut, är det inte faktiskt motsatsen till responsförskjutning. Det är en term som används när respondenterna antingen är 1) oförmögna eller 2) ovilliga att svara på din enkät.

vanligtvis är detta av några anledningar:

• deras åsikter är inte i linje med målgruppen
• undersökningen nådde inte rätt svarande
• fel publik var riktad

för det mesta sker icke-svarsförskjutning (eller som deltagandeförskjutning) eftersom din undersökning är dåligt konstruerad eller för att fel personer var riktade.

till exempel kommer en undersökning som frågar tonåringar om det bästa cigarettmärket inte att få många svar om du inte hoppar i en DeLorean och reser tillbaka till 1985.

med online-undersökningar ofta finns det en enklare anledning till utebliven bias: spam. Om du skickar ett e-postmeddelande och det skickas till skräppostmappen kommer potentiella svarande inte att se det och deras brist på svar kommer att påverka dina data.

Non-response bias lämnar dig i ganska pickle. Om du inte är försiktig kan det skeva resultaten av din forskning, leda till ofullständiga resultat och spela alla typer av spel med dina uppskattningar eftersom provstorleken var annorlunda än förväntat.

för att undvika det, se till att undersökningarna är korta, lätta att svara på och faktiskt skickas till rätt publik (inte till deras skräppostmapp.) Använd nära frågor som är enklare att fylla i och undvik frågor med dubbla tunnor eftersom de kan avskräcka människor från att svara.

hur man undviker svar Bias i dina undersökningar

vi har gått igenom de stora svar fördomar och hur du kan undvika dem. Men låt oss ta en titt på ytterligare strategier som du kan använda för att hålla din enkätdata biasfri.

ord dina frågor noggrant saucic

i filmen 300 berättar den spartanska kungen Leonidas en persisk budbärare att “välja dina nästa ord klokt”. Detsamma gäller för dina undersökningar. Frågeformulering är en av de viktigaste delarna av undersökningsprocessen.

hur du uttrycker dina frågor kan svänga svar och döda alla chanser du har att samla in exakta uppgifter. Vid undersökning forskning är det super vanligt att oavsiktligt använda ledande frågor och omedvetet påverka resultaten.

de goda exemplen lägger ansvaret på respondenten, medan de dåliga antar att respondenterna redan känner en viss känsla och uppmuntrar dem att svara negativt. Detta är en vanlig form av responsförspänning och lätt fixad med en liten formuleringsjustering.

ett annat vanligt misstag är att göra antaganden om undersökta respondenter. Till exempel, om du skulle fråga “vilket gym tränar du på?”du antar att alla som tar din undersökning går till gymmet. Detta alienerar respondenterna och kommer att leda till en lägre svarsfrekvens.

ett bra sätt att navigera i denna fråga är att använda frågelogik. Logic låter dig justera frågor baserat på tidigare svar, så att din enkät anpassar sig till dina svarande.

du kan först fråga “går du till gymmet” och ställer in det så att bara de som svarade “Ja” frågas vilket gym de tränar på. Villkorlig logik är super lätt att ställa in med Paperform—se den i aktion nedan.

Tänk på dina svarsalternativ Brasilien

om din undersökning använder flervalsfrågor eller innehåller fördefinierade svar, Vill du vara försiktig med de alternativ du ger. Ett av de största misstagen folk tenderar att inte erbjuda tillräckligt med svaralternativ.

det här kanske inte låter som en stor sak, men när människor inte ser ett svar som de ansluter till, tenderar de att välja något gammalt svar från alternativen. Detta är en form av extrema svar—och leder till felaktiga enkätsvar.

säg att du gör marknadsundersökningar för att mäta den mest populära sociala medieplattformen bland de demografiska 18-24 åren, men du lämnar Twitter.

det betyder att människor som skulle svara på” Twitter ” antingen kommer att vara icke-svarande eller tvingas välja ett svar som ligger närmast vad de verkligen vill säga. Detta fungerar inte för dig eller dina svarande och är en lose-lose situation för båda parter.

för att undvika att detta händer, försök att erbjuda tillräckligt med svarval. Detta är lätt för allmänna termer, men om saker är mer komplexa eller breda överväga att lägga till ett “annat” alternativ med plats för respondenterna att skriva in egen text.

om möjligt kan du också lägga till ett “jag vet inte” alternativ. Vissa deltagare har inte ett adekvat svar på din fråga, och snarare än att tvinga dem att ge ett felaktigt svar, ge dem möjlighet att säga att de inte har en aning.

förutom att bjuda in mer sanningsenliga svar kan detta också vara en värdefull datamängd. Om du ser en massa “jag vet inte” – svar som dyker upp kan det leda dig till en helt unik datapunkt som du inte förutsåg.

gör din hemläxa IX

innan du gör någon form av undersökning behöver du göra din forskning. Sätt ihop all information, åsikter och tankar om ämnet som du kan, så de frågor du ställer är så relevanta som möjligt.

ett bra sätt att se till att du frågar rätt saker är att slå upp gamla undersökningar och se vilka tidigare frågor som har ställts om ämnet. Titta på vad som var (och inte var) täckt, kontrollera resultaten och provstorleken och se hur du kan närma dig ämnet från en annan vinkel.

du måste också komma med vem din demografiska är. Detta påverkar vad du frågar och hur du frågar det. Ställ dig själv några frågor:

leta inte efter validering för vad du redan tror. Precis som de tillfrågade har sina fördomar, du har din också. Närma sig alla undersökningar du utför som forskare närmar sig ett experiment-med ett öppet sinne och en acceptans för att det de tror kan vara fel.

överväg att göra enkäter anonyma

att göra din enkät anonym är en genväg till mer exakta uppgifter, särskilt om du ställer känsliga frågor om personliga övertygelser och beteenden.

genom att göra en enkät anonym känner sig dina svarande automatiskt bekväma med att ge mer sanningsenliga svar. Se bara till att, om du går den här vägen, vara tydlig om deras anonymitet och att aldrig förråda respondenternas förtroende.

Detta är en idealisk strategi för saker som kundnöjdhetsundersökningar och undersökningar om arbetsplatskultur eller anställdas feedback. Ingen av dessa kräver verkligen personlig identifiering och respondenterna känner sig säkrare att veta att de inte kommer att bedömas för sina svar.

över till dig

respondenter går in i varje undersökning med något element av partiskhet. De är som cowboyen i en gammal västerländsk vandrande in i en salong, förutom att det inte är en pistol som de bär, det är fördomar av alla former och storlekar.

men att göra vad du kan för att minska sannolikheten för partiskhet i slutet gör en värld av skillnad för noggrannheten i dina resultat. Trots allt är även den bästa undersökningen bara lika bra som de insikter som den ger.

varför inte börja skapa en enkät med Paperform idag? Bygg en från grunden eller välj från 500+ mallar och kom igång direkt. Vi har alla verktyg du behöver för att skapa engagerande, svarsfria enkäter som människor tycker om att fylla i.

ge det en chans idag med vår 14-dagars gratis provperiod-inget kreditkort krävs.