Disegno di Solomon a Quattro Gruppi — Controllo della Sensibilizzazione al Pre-test
- Introdotto da
- Richard L. Solomon
- Anno
- 1949
- Tipo
- True experimental design
- Famiglia
- Experimental design
Questo testo è una traduzione automatica e non è ancora stato revisionato. Leggi l’originale in inglese
A cosa serve?
Il Disegno di Solomon a Quattro Gruppi estende il classico disegno con gruppo di controllo pre-test-post-test aggiungendo due gruppi che non ricevono alcun pre-test, consentendo ai ricercatori di rilevare se il pre-test stesso alteri le risposte dei partecipanti al trattamento.
Introdotto da Richard L. Solomon nel 1949, rimane il gold standard per isolare l'effetto indipendente di un pre-test e per ottenere stime imparziali dell'efficacia del trattamento.
L’intuizione alla base del metodo
Supponiamo che tu stia testando un nuovo programma di mindfulness. Somministri un questionario di base sullo stress a metà dei tuoi partecipanti prima che il programma inizi. La compilazione di quel questionario potrebbe di per sé rendere le persone più consapevoli di sé, e quindi apparire più migliorate al follow-up — anche senza il programma? Il disegno di Solomon risponde a questa domanda direttamente conducendo l'esperimento simultaneamente in quattro gruppi: due gruppi ricevono il pre-test e due no, e all'interno di ciascuna coppia un gruppo riceve il trattamento. Confrontando tutte e quattro le medie post-test è possibile separare nettamente ciò che il trattamento ha fatto da ciò che il pre-test ha fatto.
Storia
Richard L. Solomon introdusse il disegno in un articolo del 1949 su Psychological Bulletin come estensione esplicita del classico disegno di Campbell con gruppo di controllo pre-test-post-test, motivato da studi sull'apprendimento e sul cambiamento di atteggiamento in cui osservò che il test di base alterava le risposte successive dei partecipanti. Donald Campbell e Julian Stanley lo codificarono insieme ad altri disegni sperimentali nella loro monografia fondamentale del 1963, cementando il suo posto nel canone dei metodi di ricerca. Nonostante la sua eleganza logica, il disegno è stato usato con parsimonia nella pratica a causa delle sue esigenze di dimensione del campione, ma rimane l'esempio da manuale di come isolare la reattività della misurazione nella ricerca sperimentale.
Quando usarlo
Utilizzare il Disegno di Solomon a Quattro Gruppi quando si sospetta che il completamento di un pre-test possa modificare il modo in cui i partecipanti rispondono all'intervento — comune negli studi sul cambiamento di atteggiamento, nella ricerca educativa, negli interventi sui comportamenti sanitari e in qualsiasi dominio in cui la risposta a domande di base possa aumentare la consapevolezza o innescare risposte. È più prezioso quando la sensibilizzazione è teoricamente plausibile e il costo del raddoppio del campione è accettabile. Evitarlo quando il budget di ricerca consente solo un campione totale ridotto (ciascuno dei quattro gruppi deve essere sufficientemente ampio per rilevare gli effetti in modo indipendente), quando il fenomeno di interesse è immune alla reattività della misurazione, o quando i dati del pre-test sono essenziali per il tracciamento a livello individuale — in questi casi un disegno standard pre-test-post-test con ANCOVA è più pratico.
Limiti e considerazioni
- Richiede circa il doppio della dimensione del campione di un disegno standard pre-test-post-test, rendendolo costoso e logisticamente impegnativo.
- L'analisi statistica è complessa rispetto a semplici confronti pre-post; l'ANCOVA sul sottoinsieme con dati di pre-test richiede un'attenta gestione delle covariate mancanti per i gruppi 3 e 4.
- Non controlla gli effetti di storia o maturazione oltre quanto fornito dalla randomizzazione; queste minacce si applicano a tutti e quattro i gruppi allo stesso modo.
- Raramente utilizzato nella pratica perché l'assunzione di sensibilizzazione è spesso non verificata piuttosto che teoricamente motivata, e il costo del campione è elevato.
Le condizioni della fonte non sostituiscono una revisione scientifica indipendente né la validazione da parte di un motore di analisi.
Punti di forza
- Identifica e quantifica in modo univoco l'effetto di sensibilizzazione (test) del pre-test, che disegni più semplici confondono con l'effetto del trattamento.
- Produce la stima più internamente valida dell'efficacia del trattamento combinando prove da gruppi sia pre-testati che non pre-testati.
- Supporta un'ANOVA fattoriale completa 2 × 2, fornendo effetti principali per il trattamento e il pre-test, nonché la loro interazione.
- L'assegnazione casuale a tutti e quattro i gruppi supporta l'inferenza causale sia per gli effetti del trattamento che del pre-test simultaneamente.
- Fornisce una replica integrata: l'effetto del trattamento può essere stimato due volte (dai gruppi 1 vs. 2 e dai gruppi 3 vs. 4) e le due stime dovrebbero convergere se le assunzioni del disegno sono rispettate.
Applicazioni
- Interventi educativi in cui un test di conoscenza pre-corso potrebbe di per sé stimolare l'apprendimento prima che inizi il programma.
- Esperimenti di cambiamento di atteggiamento e persuasione in cui il completamento di una pre-misura sensibilizza i partecipanti al messaggio.
- Programmi di promozione della salute (ad es. cessazione del fumo, cambiamento dietetico) in cui questionari di base aumentano la consapevolezza del comportamento target.
- Studi di formazione psicologica che esaminano l'acquisizione di competenze, dove gli effetti di pratica dovuti al pre-test sono teoricamente plausibili.
- Ricerca sulla formazione e sviluppo organizzativo in cui la pre-valutazione potrebbe segnalare ai dipendenti gli obiettivi del programma.
Come funziona
Come funziona
I partecipanti sono assegnati casualmente a quattro gruppi di dimensioni approssimativamente uguali: (1) pre-test + trattamento + post-test, (2) pre-test + controllo + post-test, (3) nessun pre-test + trattamento + post-test, e (4) nessun pre-test + controllo + post-test. L'assegnazione casuale è essenziale; senza di essa il disegno perde la sua interpretazione causale.
I gruppi 1 e 2 completano la misura di pre-test prima che inizi qualsiasi intervento. I gruppi 3 e 4 non ricevono alcun pre-test. I dati del pre-test per i gruppi 1 e 2 servono sia come covariata di base sia come base per la stima dell'effetto di sensibilizzazione al pre-test.
I gruppi 1 e 3 ricevono il trattamento sperimentale; i gruppi 2 e 4 fungono da controlli e non ricevono alcun trattamento o una condizione placebo equivalente. Tutti gli altri aspetti dell'ambiente di studio sono mantenuti costanti tra i quattro gruppi.
Tutti e quattro i gruppi completano la stessa misura di esito nello stesso momento dopo il periodo di intervento. Il post-test è identico tra i gruppi in modo che qualsiasi differenza media sia attribuibile al trattamento e/o agli effetti del pre-test piuttosto che a differenze di misurazione.
Le medie post-test vengono confrontate tra tutti e quattro i gruppi utilizzando un'ANOVA fattoriale 2 × 2 (trattamento × pre-test come fattori), o equivalentemente tramite ANCOVA utilizzando il pre-test come covariata per i gruppi 1 e 2. Un'interazione significativa Trattamento × Pre-test indica sensibilizzazione. Gli effetti principali e di interazione insieme forniscono stime dell'effetto netto del trattamento libero da contaminazione da pre-test.
Errori comuni
- Trattare i quattro gruppi come due esperimenti separati a 2 gruppi anziché analizzare congiuntamente tutte le medie post-test — ciò spreca potenza e manca l'effetto di interazione che è il contributo principale del disegno.
- Non verificare che l'assegnazione casuale abbia prodotto gruppi bilanciati; anche con la randomizzazione, è importante verificare l'equivalenza di base tra tutti e quattro i gruppi (per i due gruppi pre-testati) e l'equivalenza demografica per tutti e quattro.
- Includere un pre-test così simile al contenuto dell'intervento da costituire un trattamento parziale anziché una mera misurazione — ciò aumenta l'effetto di sensibilizzazione apparente e distorce le stime.
- Sottodimensionare i singoli gruppi: poiché il campione complessivo è diviso in quattro celle, ciascuna cella deve essere sufficientemente ampia per contribuire a rilevare gli effetti di interazione; una 'n' per cella ridotta è un errore comune e grave.
Domande frequenti
Come gestisco i punteggi mancanti del pre-test per i gruppi 3 e 4 nell'analisi?
L'approccio raccomandato è un'ANOVA fattoriale 2 × 2 sulle quattro medie post-test, trattando la condizione di trattamento e la presenza del pre-test come i due fattori. Questo utilizza tutti i dati senza richiedere punteggi di pre-test per tutti i gruppi. In alternativa, per i gruppi 1 e 2 è possibile eseguire un'ANCOVA con il pre-test come covariata e confrontare l'effetto del trattamento aggiustato dall'ANCOVA con quello non aggiustato dei gruppi 3 e 4. Le due stime dovrebbero essere vicine se la sensibilizzazione è assente.
Quanto grande deve essere ciascun gruppo?
Ciascuna delle quattro celle dovrebbe avere una potenza sufficiente per rilevare la dimensione dell'effetto attesa per il confronto chiave. Poiché l'interazione (Trattamento × Pre-test) è tipicamente il test di maggiore interesse e gli effetti di interazione richiedono campioni più grandi degli effetti principali, pianificare almeno 30-50 partecipanti per cella nella maggior parte dei contesti delle scienze sociali, o utilizzare un'analisi di potenza a priori con la dimensione dell'effetto attesa e una potenza di 0.80.
Cosa succede se il termine di interazione non è significativo?
Un'interazione Trattamento × Pre-test non significativa è un risultato utile: indica che il pre-test non ha sensibilizzato i partecipanti, e il disegno più semplice con gruppo di controllo pre-test-post-test sarebbe stato adeguato. In tal caso, aggregare l'effetto principale del trattamento attraverso entrambe le condizioni di pre-test per la conclusione principale.
Il disegno di Solomon viene mai utilizzato negli studi clinici?
Raramente. Gli studi clinici tipicamente danno priorità al blinding e non sempre possono omettere le valutazioni di base eticamente o praticamente. Il disegno è più comune nella ricerca sociale, educativa e psicologica dove la minaccia di sensibilizzazione è più pronunciata e l'omissione di un pre-test non solleva preoccupazioni etiche.
Cosa distingue il disegno di Solomon da un esperimento fattoriale 2 × 2?
Strutturalmente è un fattoriale 2 × 2 (trattamento × pre-test), ma il fattore 'pre-test' non è una variabile di trattamento manipolata — è una caratteristica del disegno la cui presenza o assenza è assegnata per controllare una variabile di disturbo. Il disegno di Solomon è quindi meglio inteso come un metodo per purificare l'inferenza causale sul trattamento principale piuttosto che come uno studio fattoriale di due fattori indipendenti.
Metodi correlati
Fonti
Solomon, R. L. (1949). An extension of control group design. Psychological Bulletin, 46(2), 137–150.
Apri il riferimento DOICopiato.Campbell, D. T., & Stanley, J. C. (1963). Experimental and Quasi-Experimental Designs for Research. Rand McNally.
ISBN: 978-0395307878Copiato.