Cercando di vedere gli oggetti per i mezzi

Il mio collega Kalif Vaughn e io ci siamo fatti un'idea di ricerca questo mese. Abbiamo condotto un primo studio e ottenuto ottimi dati. Scommetto che se avessimo continuato a inviare un documento, avremmo navigato senza problemi. * Ma c'era un problema. Vedi se riesci a individuarlo.

Abbiamo presentato ai partecipanti problemi di Remote Assist Test (RAT). Per esempio,

• Piedino da golf per sandwich
• End Line Lock
• Lancio laterale
• Fork Dark Man

C'è una quarta parola che si adatta a ciascuno di questi trii (risposte sotto).

Abbiamo dato ai nostri partecipanti 10 secondi per pensare alla risposta. Poi abbiamo detto loro la risposta o gli abbiamo dato altri 30 secondi per meditare e poi abbiamo detto loro la risposta. La domanda era: il gruppo dei 40 secondi avrebbe sovraperformato il gruppo dei 10 secondi in un test avvenuto qualche minuto dopo? Siamo entusiasti di questo risultato perché la risposta era no.

• Sull'onore di essere selezionato come uno degli esperti di influenza più influenti in America
• Sesso e leadership per le donne
• Hai avuto una fantasia omicida oggi?
• Politica basata sull'evidenza: gli psicologi possono farlo da soli?
• Cura di vivere a lungo? Potresti provare a leggere libri

Sono davvero interessato a sapere se il successo del recupero influisce sull'apprendimento. Ho pubblicato quest'anno uno studio che dimostra che fare un tentativo di recupero conta molto, ma che il suo successo non sembra avere importanza (Kornell, Klein, & Rawson, 2015). Quindi abbiamo esaminato i nostri nuovi dati, ed ecco: I partecipanti hanno ottenuto più risposte corrette (durante la prima fase) nella condizione di 40 secondi rispetto alla condizione di 10 secondi. Ma (come ho detto) non hanno fatto di meglio nel test finale. Così abbiamo tratto l'ovvia conclusione: ancora una volta, provare a pensare alla risposta era vantaggioso, ma il successo era irrilevante.

Trova il problema? È in quell'ultimo paragrafo. Ecco un'altra informazione. Durante la fase di studio, la condizione 40 secondi ha fatto circa 10 punti percentuali meglio rispetto al gruppo 10 secondi. In altre parole, solo il 10% degli articoli è stato convertito da errori di recupero in successi di recupero.

Ora immaginiamo che il successo del recupero sia importante e si traduce in una differenza di 15 punti percentuali nell'apprendimento. Un vantaggio del 15% per il 10% degli articoli? Se il successo nel recupero conta, ciò comporterebbe una differenza enorme di 1,5 punti percentuali sul test finale. Troppo piccolo da rilevare.

• Non abbiamo nulla da temere, ma il dolore stesso – Forse
• C'è abbastanza?
• Sogno di esami finali ricorrenti
• Processo decisionale 401
• In "Difesa" di Tiger Woods, E dei suoi critici

Quindi abbiamo ancora una scoperta interessante qui (stiamo ancora lavorando attivamente a questo progetto). Ma sulla base dei dati finora, sarebbe sbagliato trarre conclusioni sull'effetto del successo nel recupero. Per un fortunato incidente abbiamo pensato a questo problema. Ma mi preoccupa quanto sarebbe facile mancare. Qui ci sono due trappole:

• Eccessivo affidamento sul significato. Solo perché un effetto è significativo (l'aumento del 10% delle prestazioni durante la fase di studio) non significa che possiamo dimenticare la dimensione dell'effetto e solo assumere che sia trascendente e che abbia grandi effetti su tutta la linea.
• Aggregazione invece di individuazione. È allettante pensare agli effetti come monoliti che influenzano tutti gli oggetti. Questo è fondamentalmente quello che facciamo quando tramiamo significa. Ma a volte un effetto si applica solo a un sottoinsieme di elementi. In questo caso, il successo del recupero è stato applicato solo al 10% degli articoli. (Abbiamo tratto una conclusione simile sull'importanza di dis-aggregare gli articoli nell'esaminare l'effetto a lungo termine dei test in Kornell, Bjork e Garcia, 2011.)

È un po 'l'opposto di "non è possibile vedere la foresta per gli alberi". Il problema qui è di trascurare le persone: "non può vedere gli oggetti per i mezzi".

Risposte: club, dead, broad, pitch

Datemi un'occhiata su Twitter.

* Ah ah, si. Destra.

Riferimenti

Kornell, N., Bjork, RA, e Garcia, MA (2011). Perché i test sembrano prevenire la dimenticanza: un modello di biforcazione basato sulla distribuzione. Journal of Memory and Language, 65 (2) , 85-97. doi: 10.1016 / j.jml.2011.04.002

Kornell, N., Klein, PJ, & Rawson, KA (2015). I tentativi di recupero migliorano l'apprendimento, ma il successo nel recupero (rispetto al fallimento) non ha importanza. Journal of Experimental Psychology: Learning, Memory and Cognition, 41 (1), 283-294. doi: 10,1037 / a0037850