Comprensione della validità interna ed esterna

La validità interna ed esterna sono concetti che riflettono se i risultati di uno studio sono attendibili e significativi. Mentre la validità interna si riferisce al modo in cui viene condotto uno studio (la sua struttura), la validità esterna si riferisce a quanto i risultati sono applicabili al mondo reale.

Validità interna

La validità interna è la misura in cui uno studio stabilisce una relazione causa-effetto affidabile tra un trattamento e un risultato. Riflette anche che un dato studio consente di eliminare spiegazioni alternative per un accertamento. Ad esempio, se si implementa un programma per smettere di fumare con un gruppo di individui, in che misura si può essere certi che qualsiasi miglioramento osservato nel gruppo di trattamento sia dovuto al trattamento che è stato somministrato?

La validità interna dipende in gran parte dalle procedure di uno studio e dalla sua rigorosa esecuzione.

La validità interna non è un tipo di concetto "sì o no". Invece, consideriamo quanto possiamo essere fiduciosi con i risultati di uno studio, in base al fatto che eviti trappole che potrebbero rendere discutibili i risultati.

Minore è la possibilità di "confondere" in uno studio, maggiore è la validità interna e più sicuro possiamo essere nei risultati. La confusione si riferisce a una situazione in cui entrano in gioco altri fattori che confondono l'esito di uno studio. Ad esempio, uno studio potrebbe renderci insicuri se possiamo fidarci di aver identificato lo scenario di "causa-effetto" sopra.

In breve, puoi essere certo che il tuo studio è internamente valido se puoi escludere spiegazioni alternative per i tuoi risultati. In breve, puoi assumere la causa ed effetto solo quando soddisfi i seguenti tre criteri nel tuo studio:

1. La causa ha preceduto l'effetto in termini di tempo.
2. La causa e l'effetto variano insieme.
3. Non ci sono altre spiegazioni probabili per questa relazione che hai osservato.

Fattori che migliorano la validità interna

Se stai cercando di migliorare la validità interna di uno studio, vorrai considerare aspetti del tuo progetto di ricerca che renderanno più probabile la possibilità di respingere ipotesi alternative. Ci sono molti fattori che possono migliorare la validità interna.

• La randomizzazione si riferisce all'assegnazione casuale dei partecipanti ai gruppi di trattamento e controllo e garantisce che non vi sia alcun pregiudizio sistematico tra i gruppi.
• Selezione casuale dei partecipanti si riferisce alla scelta dei partecipanti a caso o in un modo in cui sono rappresentativi della popolazione che si desidera studiare.
• Blinding in uno studio si fa riferimento ai partecipanti - e talvolta ai ricercatori - che non sono consapevoli di quale intervento stanno ricevendo (ad esempio utilizzando un placebo in uno studio sui farmaci) per evitare che questa conoscenza pregiudichi le loro percezioni e comportamenti e quindi il risultato dello studio.
• Manipolazione sperimentale si riferisce alla manipolazione di una variabile indipendente in uno studio (ad esempio, dando ai fumatori un programma di cessazione) invece di osservare semplicemente un'associazione senza condurre alcun intervento (esaminando la relazione tra esercizio e comportamento del fumo).
• Protocollo di studio si riferisce alle seguenti procedure specifiche per la somministrazione di un trattamento in modo da non introdurre effetti di, ad esempio, fare le cose in modo diverso con un gruppo di persone rispetto ad un altro gruppo di persone.

Come funziona la selezione casuale?

Fattori che minacciano la validità interna

Così come ci sono molti modi per garantire che uno studio sia internamente valido, c'è anche un elenco di potenziali minacce alla validità interna che dovrebbero essere considerate quando si pianifica uno studio.

• confusionesi riferisce a una situazione in cui si può pensare che i cambiamenti in una variabile di esito derivino da una terza variabile correlata al trattamento che è stato somministrato.
• Eventi storici può influenzare il risultato di studi che si verificano in un periodo di tempo. Esempi di questi eventi potrebbero includere un cambiamento nel leader politico o nella catastrofe naturale che influenza il modo in cui i partecipanti allo studio sentono e agiscono.
• Maturazionesi riferisce all'impatto del tempo come variabile in uno studio. Se uno studio si svolge in un periodo di tempo in cui è possibile che i partecipanti siano cambiati in qualche modo (invecchiati, stanchi), allora potrebbe essere impossibile escludere se gli effetti osservati nello studio fossero semplicemente dovuti all'effetto di tempo.
• analisisi riferisce all'effetto di testare ripetutamente i partecipanti usando le stesse misure. Se assegni a qualcuno lo stesso test tre volte, è improbabile che facciano meglio mentre apprendono il test o si abituano al processo di test in modo che rispondano in modo diverso?

• Strumentazione fa riferimento all'impatto degli attuali strumenti di prova utilizzati in uno studio sul modo in cui i partecipanti rispondono. Anche se può sembrare insolito, è possibile "innescare" i partecipanti in uno studio in certi modi con le misure che usi, il che li induce a reagire in un modo diverso da quello che avrebbero altrimenti.
• Regressione statisticasi riferisce all'effetto naturale dei partecipanti alle estremità estreme di una misura che cade in una certa direzione solo per il passare del tempo piuttosto che l'effetto di un intervento.
• logoramento si riferisce ai partecipanti che abbandonano o lasciano uno studio, il che significa che i risultati si basano su un campione parziale solo delle persone che non hanno scelto di andarsene (e possibilmente hanno tutti qualcosa in comune, come una motivazione più elevata).
• Diffusionesi riferisce al trattamento in uno studio che si estende dal gruppo di trattamento al gruppo di controllo attraverso i gruppi che interagiscono e parlano o si osservano l'un l'altro. Questo può anche portare ad un altro problema chiamato demoralizzazione risentita, in cui un gruppo di controllo cerca meno duramente perché si sentono risentiti rispetto al gruppo in cui si trovano.

• Pregiudizio sperimentatoresi riferisce a uno sperimentatore che si comporta in modo diverso con gruppi diversi in uno studio, il che porta a un impatto sui risultati di questo studio (ed è eliminato attraverso l'accecamento).

Validità esterna

La validità esterna si riferisce a quanto si può aspettare che il risultato di uno studio si applichi ad altre impostazioni. In altre parole, questo tipo di validità si riferisce a quanto sono generalizzabili i risultati. Ad esempio, i risultati si applicano ad altre persone, impostazioni, situazioni e periodi di tempo?

La validità ecologica, un aspetto della validità esterna, si riferisce al fatto se i risultati di uno studio possono essere generalizzati al mondo reale.

Mentre i rigorosi metodi di ricerca possono garantire la validità interna, la validità esterna, d'altro canto, può essere limitata da questi metodi.

Un altro termine chiamato trasferibilità si riferisce alla validità esterna e si riferisce alla progettazione qualitativa della ricerca. La trasferibilità si riferisce al fatto che i risultati vengano trasferiti a situazioni con caratteristiche simili.

Fattori che migliorano la validità esterna

Cosa puoi fare per migliorare la validità esterna del tuo studio?

• Criteri di inclusione ed esclusione dovrebbe essere usato per assicurarti di aver definito chiaramente la popolazione che stai studiando nella tua ricerca.
• Realismo psicologico si riferisce a fare in modo che i partecipanti stiano vivendo gli eventi di uno studio come un vero evento e può essere raggiunto raccontando loro una "cover story" sullo scopo dello studio. Altrimenti, in alcuni casi, i partecipanti potrebbero comportarsi diversamente da come sarebbero nella vita reale se sapessero cosa aspettarsi o sapessero qual è lo scopo dello studio.
• replicazione si riferisce a condurre nuovamente lo studio con campioni diversi o in impostazioni diverse per vedere se si ottengono gli stessi risultati. Quando sono stati condotti molti studi, meta-analisi può anche essere usato per determinare se l'effetto di una variabile indipendente è affidabile (basato sull'esame dei risultati di un gran numero di studi su un argomento).
• Esperimenti sul campopuò anche essere usato in cui condurre uno studio fuori dal laboratorio in un ambiente naturale.
• Ricondizionamento o calibrazione si riferisce all'utilizzo di metodi statistici per regolare i problemi relativi alla validità esterna. Ad esempio, se uno studio presentava gruppi non uniformi per alcune caratteristiche (come l'età), potrebbe essere utilizzata la riponderazione.

Fattori che minano la validità esterna

La validità esterna è minacciata quando uno studio non prende in considerazione le interazioni delle variabili nel mondo reale.

• Fattori situazionali come l'ora del giorno, l'ubicazione, il rumore, le caratteristiche del ricercatore e il numero di misure utilizzate possono influire sulla generalizzabilità dei risultati.
• Effetti pre e post test fare riferimento alla situazione in cui il pre o post-test è in qualche modo correlato all'effetto osservato nello studio, in modo tale che la relazione causa-effetto scompaia senza questi test aggiuntivi.
• Funzionalità di esempio fare riferimento alla situazione in cui alcune caratteristiche del particolare campione erano responsabili dell'effetto (o parzialmente responsabile), portando a una generalizzabilità limitata dei risultati.
• Bias di selezione si riferisce al problema delle differenze tra i gruppi in uno studio che può riguardare la variabile indipendente (ancora una volta, qualcosa come la motivazione o la volontà di prendere parte allo studio, dati demografici specifici degli individui che sono più propensi a prendere parte a un sondaggio online). Questo può anche essere considerato una minaccia alla validità interna.

Somiglianze e differenze

La validità interna ed esterna sono come due lati della stessa moneta. Puoi avere uno studio con una buona validità interna, ma nel complesso potrebbe essere irrilevante per il mondo reale. D'altra parte, potresti condurre uno studio sul campo che è molto rilevante per il mondo reale, ma che non ha risultati attendibili in termini di conoscenza di quali variabili hanno causato i risultati che vedi.

Analogie

Quali sono le somiglianze tra validità interna ed esterna? Sono entrambi fattori che dovrebbero essere considerati quando si progetta uno studio, ed entrambi hanno implicazioni sul fatto che i risultati di uno studio abbiano un significato. Entrambi non sono concetti "o / o", quindi deciderete sempre in che misura il vostro studio si svolge in termini di entrambi i tipi di validità.

Ciascuno di questi concetti è tipicamente riportato in un articolo di ricerca che è pubblicato su una rivista accademica. Questo è così che altri ricercatori possono valutare lo studio e prendere decisioni sul fatto che i risultati siano utili e validi.

differenze

La differenza essenziale tra la validità interna ed esterna è che la validità interna si riferisce alla struttura di uno studio e alle sue variabili mentre la validità esterna si riferisce a quanto universali sono i risultati. Ci sono ulteriori differenze tra i due.

Validità interna

• Concentrati sull'accuratezza e su metodi di ricerca forti

• Controlla variabili estranee

• Le conclusioni sono giustificate

• Elimina le spiegazioni alternative

Validità esterna

• I risultati si traducono in tutto il mondo

• I risultati sono generalizzabili

• I risultati si applicano a situazioni pratiche

• I risultati possono essere tradotti in un altro contesto

La validità interna si concentra sul mostrare una differenza dovuta alla sola variabile indipendente, mentre i risultati della validità esterna possono essere tradotti nel mondo in generale.

Esempi

Un esempio di uno studio con una buona validità interna sarebbe se un ricercatore ipotizzasse che l'uso di una particolare app di consapevolezza ridurrebbe l'umore negativo. Per verificare questa ipotesi, il ricercatore assegna casualmente un campione di partecipanti a uno dei due gruppi: coloro che useranno l'app per un periodo definito e coloro che intraprendono un'attività di controllo.

Il ricercatore assicura che non vi sia alcun pregiudizio sistematico nel modo in cui i partecipanti vengono assegnati ai gruppi, e acceca anche i suoi assistenti di ricerca ai gruppi in cui gli studenti si trovano durante la sperimentazione.

Viene utilizzato un protocollo di studio rigoroso che delinea le procedure dello studio. Le potenziali variabili confondenti sono misurate insieme all'umore, come lo stato socioeconomico dei partecipanti, il sesso, l'età, tra gli altri fattori. Se i partecipanti abbandonano lo studio, le loro caratteristiche vengono esaminate per assicurarsi che non vi sia alcun pregiudizio sistematico in termini di chi rimane nello studio.

Un esempio di uno studio con una buona validità esterna sarebbe nell'esempio sopra riportato, il ricercatore ha anche assicurato che lo studio avesse validità esterna facendo in modo che i partecipanti usassero l'app a casa piuttosto che in laboratorio. Il ricercatore definisce chiaramente la popolazione di interesse e sceglie un campione rappresentativo, e replica lo studio per diversi dispositivi tecnologici.

Una parola da Verywell

Impostare un esperimento in modo che abbia una valida validità interna ed esterna implica essere consapevoli fin dall'inizio dei fattori che possono influenzare ogni aspetto della ricerca. È meglio dedicare più tempo a progettare uno studio strutturalmente solido che abbia implicazioni di vasta portata piuttosto che affrettarsi rapidamente nella fase di progettazione solo per scoprire problemi in seguito. Solo quando la validità sia interna che esterna è alta, si possono trarre conclusioni importanti sui risultati.

Una panoramica del metodo scientifico