Förstå inre och extern giltighet

Intern och extern validitet är begrepp som speglar huruvida resultaten av en studie är trovärdiga och meningsfulla. Medan intern validitet är relaterad till hur bra en studie utförs (dess struktur), gäller extern validitet för hur tillämpliga resultaten är för den verkliga världen.

Intern Giltighet

Intern validitet är i vilken utsträckning en studie etablerar ett trovärdigt orsakssamband mellan behandling och utfall. Det speglar också att en given studie gör det möjligt att eliminera alternativa förklaringar för ett resultat. Om du till exempel genomför ett rökavvänjningsprogram med en grupp individer, hur säker kan du vara att någon förbättring som ses i behandlingsgruppen beror på den behandling du administrerade?

Intern validitet beror i stor utsträckning på rutinerna i en studie och hur noggrant det utförs.

Intern validitet är inte en "ja eller nej" typ av koncept. Istället betraktar vi hur säkert vi kan vara med resultaten av en studie, baserat på huruvida det undviker fällor som kan göra fynden tvivelaktiga.

Ju mindre chans det finns för "förvirrande" i en studie, desto högre är den interna validiteten och det säkrare vi kan vara i resultaten. Förvirrande hänvisar till en situation där andra faktorer kommer till spel som förvirrar resultatet av en studie. En studie kan till exempel göra oss osäkra om vi kan lita på att vi har identifierat ovanstående "orsak och effekt" -scenarie.

Kort sagt, du kan bara vara säker på att din studie är internt giltig om du kan utesluta alternativa förklaringar för dina resultat. Som en kort sammanfattning kan du bara anta orsak och effekt när du uppfyller följande tre kriterier i din studie:

1. Orsaken föregick effekten när det gäller tid.
2. Orsak och effekt varierar ihop.
3. Det finns inga andra troliga förklaringar för detta förhållande som du har observerat.

Faktorer som förbättrar intern giltighet

Om du vill förbättra den interna validiteten av en studie, vill du överväga aspekter av din forskningsdesign som gör det mer troligt att du kan avvisa alternativa hypoteser. Det finns många faktorer som kan förbättra den interna validiteten.

• randomisering refererar till slumpmässigt tilldelande deltagare till behandlings- och kontrollgrupper och säkerställer att det inte finns någon systematisk förspänning mellan grupper.
• Slumpmässigt urval av deltagare hänvisar till att välja dina deltagare slumpmässigt eller på ett sätt som de är representativa för den befolkning som du vill studera.
• Bländande i en studie hänvisar till deltagare - och ibland forskare - är inte medvetna om vilket ingripande de får (t.ex. genom att använda en placebo i en medicinsk studie) för att undvika denna kunskap som förspänner deras uppfattningar och beteenden och därmed resultatet av studien.
• Experimentell manipulation avser att manipulera en oberoende variabel i en studie (till exempel att ge rökare ett upphörande program) istället för att bara observera en förening utan att genomföra något ingrepp (undersöka förhållandet mellan motion och rökning).
• Studieprotokoll hänvisar till följande specifika förfaranden för administrering av en behandling för att inte införa några effekter av att till exempel göra saker annorlunda med en grupp människor mot en annan grupp människor.

Hur fungerar slumpmässigt urval?

Faktorer som hotar intern giltighet

Precis som det finns många sätt att se till att en studie är internt giltig finns det också en lista över potentiella hot mot intern validitet som bör beaktas vid planering av en studie.

• confoundinghänvisar till en situation där förändringar i en resultatvariabel kan anses ha orsakats av någon tredje variabel som är relaterad till behandlingen som du administrerade.
• Historiska händelser kan påverka resultatet av studier som uppträder över en tidsperiod. Exempel på dessa händelser kan innefatta en förändring av politisk ledare eller naturkatastrof som påverkar hur deltagarna känner och agerar.
• Mognanderefererar till tidens inverkan som variabel i en studie. Om en studie äger rum under en tidsperiod där det är möjligt att deltagarna naturligt förändrats på något sätt (blev äldre, blev trötta), då kan det vara omöjligt att utesluta om effekter som ses i studien helt enkelt berodde på effekten av tid.
• Testninghänvisar till effekten av upprepade gånger testande deltagare med samma åtgärder. Om du ger någon samma test tre gånger, är det inte troligt att de kommer att göra bättre när de lär sig testet eller blir vana vid testprocessen så att de svarar annorlunda?

• Instrumentation refererar till effekten av de faktiska testinstrument som används i en studie om hur deltagarna svarar. Även om det kanske låter ovanligt är det möjligt att "pröva" deltagarna i en studie på vissa sätt med de åtgärder du använder, vilket får dem att reagera på ett sätt som är annorlunda än vad de annars skulle ha.
• Statistisk regressionhänvisar till deltagarnas naturliga effekt vid extrema ändar av en åtgärd som faller i en viss riktning bara på grund av tidens gång i stället för effekten av en intervention.
• Nötning hänvisar till deltagare som släpper ut eller lämnar en studie, vilket innebär att resultaten bygger på ett fördjupat prov av endast de personer som inte valde att lämna (och möjligen vem alla har något gemensamt, till exempel högre motivation).
• Diffusionhänvisar till behandlingen i en studie som sprider sig från behandlingsgruppen till kontrollgruppen genom grupperna som interagerar och pratar med eller observerar varandra. Detta kan också leda till en annan fråga som kallas fördärvlig demoralisering, där en kontrollgrupp försöker mindre svårt eftersom de känner sig irriterande över den grupp som de är i.

• Experimentera biasrefererar till en experimenter som agerar på ett annat sätt med olika grupper i en studie, vilket leder till en inverkan på resultaten av denna studie (och elimineras genom blindning).

Extern validitet

Extern validitet avser hur bra resultatet av en studie kan förväntas gälla för andra inställningar. Med andra ord hänvisar denna typ av validitet till hur generaliserbara resultaten är. Till exempel gäller resultaten för andra människor, inställningar, situationer och tidsperioder?

Ekologisk validitet, en aspekt av extern validitet, hänvisar till huruvida en undersöknings resultat kan generaliseras till den verkliga världen.

Medan noggranna forskningsmetoder kan säkerställa intern validitet kan den externa validiteten däremot begränsas av dessa metoder.

En annan term som kallas överförbarhet avser extern validitet och refererar till den kvalitativa forskningsdesignen. Överförbarhet avser huruvida resultaten överförs till situationer med liknande egenskaper.

Faktorer som förbättrar extern giltighet

Vad kan du göra för att förbättra din externa validitet??

• Inkluderings- och uteslutningskriterier bör användas för att säkerställa att du tydligt har definierat den population du studerar i din forskning.
• Psykologisk realism avser att se till att deltagarna upplever händelserna i en studie som en riktig händelse och kan uppnås genom att berätta för dem en "täckningshistoria" om syftet med studien. Annars kan deltagarna i vissa fall uppträda annorlunda än de skulle i verkliga livet om de vet vad de ska förvänta sig eller vet vad syftet med studien är.
• Replication avser att genomföra studien igen med olika prov eller i olika inställningar för att se om du får samma resultat. När många studier har genomförts, Meta-analys kan också användas för att bestämma om effekten av en oberoende variabel är tillförlitlig (baserat på att undersöka resultaten av ett stort antal studier om ett ämne).
• Fältförsökkan också användas där du utför en studie utanför laboratoriet i en naturlig miljö.
• Reprocessering eller kalibrering refererar till att använda statistiska metoder för att justera för problem relaterade till extern validitet. Till exempel, om en studie hade ojämna grupper för vissa egenskaper (som ålder), kan reweighting användas.

Faktorer som hotar extern giltighet

Extern validitet hotas när en studie inte tar hänsyn till växelverkan mellan variabler i den verkliga världen.

• Situationsfaktorer såsom tid på dagen, plats, buller, forskarens egenskaper och hur många åtgärder som används kan påverka funktionalitetens generaliserbarhet.
• Före- och efterprovseffekter hänvisa till den situation där för- eller efterprovet på något sätt är relaterat till effekten i studien, så att orsak-och-effekt-förhållandet försvinner utan dessa tillsatta tester.
• Provfunktioner hänvisa till den situation där vissa egenskaper hos det speciella provet var ansvariga för effekten (eller delvis ansvarig), vilket leder till en begränsad generaliserbarhet av resultaten.
• Urvalsförskjutning Hänvisar till problemet med skillnader mellan grupper i en studie som kan relatera till den oberoende variabeln (än en gång, något som motivation eller vilja att delta i studien, specifika demografi av individer är mer benägna att delta i en online-undersökning). Detta kan också betraktas som ett hot mot intern validitet.

Likheter och skillnader

Intern och extern validitet är som två sidor av samma mynt. Du kan ha en studie med god intern validitet, men totalt sett kan det vara irrelevant för den verkliga världen. Å andra sidan kan du göra en fältstudie som är mycket relevant för den verkliga världen, men det har inte trovärdiga resultat när det gäller att veta vilka variabler som orsakade resultaten som du ser.

Likheter

Vad är likheterna mellan intern och extern validitet? De är båda faktorer som bör beaktas vid utformningen av en studie, och båda har konsekvenser när det gäller huruvida resultaten av en studie har betydelse. Båda är inte "antingen" eller "begrepp", så du kommer alltid att bestämma i vilken grad din studie utför både när det gäller båda typerna av validitet.

Var och en av dessa begrepp rapporteras vanligtvis i en forskningsartikel som publiceras i en vetenskaplig tidskrift. Det är så att andra forskare kan utvärdera studien och fatta beslut om huruvida resultaten är användbara och giltiga.

skillnader

Den väsentliga skillnaden mellan intern och extern validitet är att intern validitet avser strukturen i en studie och dess variabler medan extern validitet avser hur universell resultaten är. Det finns ytterligare skillnader mellan de två också.

Intern Giltighet

• Fokusera på noggrannhet och starka forskningsmetoder

• Kontrollerar externa variabler

• Slutsatser är motiverade

• Eliminerar alternativa förklaringar

Extern validitet

• Resultatet översätter till världen som helhet

• Resultaten är generaliserbara

• Utfallet gäller för praktiska situationer

• Resultaten kan översättas till ett annat sammanhang

Intern validitet fokuserar på att visa en skillnad som beror på den oberoende variabeln ensam, medan externa validitetsresultat kan översättas till världen i stort.

exempel

Ett exempel på en studie med god intern validitet skulle vara om en forskare hypoteser att användandet av en särskild mindfulness-app kommer att minska negativ humör. För att testa den här hypotesen tilldelar forskaren slumpmässigt ett antal deltagare till en av två grupper: de som kommer att använda appen under en bestämd period och de som deltar i en kontrolluppgift.

Forskaren ser till att det inte finns någon systematisk fördjupning i hur deltagarna är tilldelade till grupperna, och blinds också sina forskningsassistenter till de grupper eleverna befinner sig i under experiment.

Ett strikt studieprotokoll används som beskriver procedurerna i studien. Potentiella confounding variabler mäts tillsammans med humör, som deltagarna socioekonomisk status, kön, ålder bland andra faktorer. Om deltagarna släpper ut ur studien undersöks deras egenskaper för att se till att det inte finns någon systematisk förspänning när det gäller vem som bor i studien.

Ett exempel på en studie med god extern validitet skulle vara i ovanstående exempel, försäkrade forskaren också att studien hade extern validitet genom att deltagarna använde appen hemma snarare än i laboratoriet. Forskaren definierar tydligt befolkningen av intresse och väljer ett representativt urval, och han / hon replikerar studien för olika tekniska enheter.

Ett ord från Verywell

Att inrätta ett experiment så att det låter internt och externt gäller att vara medveten från början om faktorer som kan påverka varje aspekt av din forskning. Det är bäst att spendera extra tid att utforma en strukturellt bra studie som har långtgående konsekvenser snarare än att snabbt rusa genom designfasen bara för att upptäcka problem senare. Endast när både intern och extern validitet är hög kan starka slutsatser göras om dina resultat.

En översikt över den vetenskapliga metoden