Psicologia dell'integrità scientifica: programma universitario

Questa voce è stata ispirata da questo post sul blog di Sanjay Srinivasta. Sanjay è stato in prima linea nel migliorare la scienza psicologica, e il suo post era un falso programma per un corso intitolato Everything is F **** d: The Syllabus . Sanjay definisce le pratiche scientifiche come f ***** d quando presentano "… difficili sfide concettuali alle quali le soluzioni implementabili e reali per gli scienziati che lavorano non sono disponibili o vengono normalmente ignorate nella pratica".

Settimana dopo settimana, il corso finto di Sanjay presenta letture che sostengono che alcuni aspetti di ciò che abbiamo dato per scontato come "buone" scienze nella psicologia sono f ***** d. Ciò include esperimenti, recensioni, statistiche, meta-analisi, replica e altro.

Il fatto è che ho insegnato due corsi reali sostanzialmente sullo stesso argomento dal 2014. Quello presentato qui è il mio corso di laurea; un altro blog presenta il corso di laurea.

La mia etichettatura è, forse, leggermente meno drammatica. Entrambi i corsi sono chiamati:

La psicologia dell'integrità scientifica

Fonte: Lee Jussim, un edificio privo di integrità

L'integrità scientifica si riferisce a due concetti che promuovono l'idea che la scienza dovrebbe essere "corretta": 1. Onestà personale e affidabilità nella conduzione e nell'interpretazione della ricerca scientifica; e 2. Sviluppare un corpus di conclusioni che siano valide e intatte. Le statistiche, i metodi, la trasparenza, la replica e il pregiudizio politico sono venuti alla ribalta come minacce all'integrità della psicologia e di altre discipline scientifiche.

Perché gli studi che non possono essere replicati diventano famosi e influenti?

Perché, anche quando uno studio può essere replicato, i risultati negli studi successivi sono spesso molto più deboli?

Perché alcuni ricercatori non permetteranno ad altri di analizzare i propri dati?

Questo corso fornirà alcune risposte preliminari a queste domande, principalmente attraverso letture e discussioni. Per essere chiari, però, questo corso non è anti-scienza. La sua prospettiva è che il miglior antidoto alla cattiva scienza non è una delle tante alternative anti-scientifiche che esistono (postmodernismo, costruzionismo sociale, soprannaturalismo o qualsiasi altra cosa). La soluzione alla cattiva scienza è una buona scienza.

Il progetto finale

La classe raccoglie circa 20 articoli dal Journal of Personality and Social Psychology. Di solito, questo include un totale di circa 60 studi separati. Esegue quindi una serie di quelle che io chiamo analisi "forensi", molte delle quali sono disponibili qui:

L'app p-checker può essere utilizzata per rispondere a domande come:

  1. I risultati sono troppo coerenti per essere credibili?
  2. La ricerca potrebbe essere replicabile?
  3. C'è davvero un effetto lì, o l'area è piena di pregiudizi di pubblicazione e pratiche di ricerca discutibili?

Hanno anche la possibilità di sottoporre gli studi a un "test di incredibilità". I risultati possono dimostrarsi letteralmente troppo buoni per essere veri attraverso questo test.

LETTURE

Tuttavia, il nucleo del corso sono le letture, la cui incarnazione più recente è presentata qui. Questi sono progettati per gli studenti universitari avanzati. In quanto tali, non sono solitamente così tecnici come quelli che troverete sulla pagina di Sanjay (che è un blog per ricercatori e studenti laureati). Alcuni sono notizie mainstream (NYTimes, Atlantic Monthly, ecc.), Ma alcuni sono più tecnici. Se tu, i miei lettori di Psych Today Blog, vuoi sapere perché alcune persone pensano che tutto sia F ***** d, immagino che dovrai solo fare i conti con alcuni degli aspetti tecnici.

Alcuni ultimi disclaimer per i lettori di Psych Today:

  1. Il programma è costantemente in flusso, e ogni semestre potrebbe non avere tutte queste letture e / o potrebbero avere altre non elencate qui.
  2. Questo inizia appena a scalfire la superficie di questi problemi, che vanno molto più in profondità di quanto possa essere affrontato in una classe di tre mesi di corso. Ma è un buon inizio, spero.

La scienza è un disastro: panoramica

  • Benefici della diversità. Come l'arroganza ha impedito l'astronomia.
  • Nove cerchi di inferno scientifico
  • Bugie, maledette bugie e scienza medica
  • Unicorni di psicologia sociale

Aspettare! Qual è la scienza dovrebbe essere: una breve panoramica e aggiornamento

  • Scienza
  • Il metodo scientifico

Chirurgia? Non credere sempre tutto ciò che ti dice il tuo dottore

  • La chirurgia del ginocchio comune fa poco per molti
  • La nostra guerra sentimentale (ma disfunzionale) sul cancro al seno

Come la scienza psicologica va male

  • Psicologia falsa positiva
  • Pratiche di ricerca discutibili
  • Una breve panoramica di come la psicologia va male (John Doris Guest Post)
  • The Simpleminded and the Muddleheaded
  • Reckoning con il passato

Non è solo psicologia

  • Freakonomics Podcast: Outsiders by Design (sul modo in cui la scienza maltratta ripetutamente gli "estranei", a prescindere da quanto sia buona la loro ricerca)

I due problemi gemelli di pregiudizio politico e avvincente racconto: come il ricercatore motiva ad anticipare le agende ideologiche e cambiare il mondo distorce la loro ricerca

  • Distorsione politica della scienza: inesattezza stereotipata?
  • Privilegio liberale in psicologia
  • Steele & Aronson (1995). Stereotipo Minaccia
    • Nota: questo è incluso come esempio di come i ricercatori affermano di aver trovato, e quindi promosso, un DRAMATIC CHANGKINGING FINDING !!! ("Rimuovi la minaccia e i punteggi dei test black = white"), quando, in realtà, non hanno mai effettivamente trovato una cosa del genere. Vedi questo post per i dettagli molto cruenti.
  • Il consiglio di Bem sulla scrittura, come esempio di come la formazione di base incoraggi metodi e statistiche disfunzionali.
  • Distorsioni politiche nella psicologia sociale delle relazioni intergruppo
  • Pregiudizio ideologico nella ricerca psicologica sociale
  • Possono gli alti propositi morali minare l'integrità scientifica?
  • La diversità politica migliorerà la scienza psicologica.
  • Interpretazioni e metodi: verso una psicologia sociale di auto-correzione più efficace.

(Mancanza di) Trasparenza

  • I documenti con più errori hanno più probabilità di avere autori che non forniranno i dati
Fonte: mago Will Fern **

Eppure, forse non è tutto buio e disperazione

  • La maggior parte dei risultati pubblicati sulla psicologia sociale sono falsi?

** Almeno il mago Will Fern ammette che sta creando un'illusione.