Di Dr. Russell T. Warne (@Russwarne)
La scorsa primavera, oltre 4 milioni di studenti delle scuole superiori hanno sostenuto oltre 2 milioni di test Advanced Placement (AP). Sponsorizzato dal College Board, i corsi AP sono tenuti da insegnanti delle scuole superiori e consentono agli studenti di guadagnare crediti universitari superando un test alla fine dell'anno scolastico. Secondo il College Board, gli studenti dei corsi AP imparano altro materiale, sono più preparati per l'università e finiscono una laurea prima degli studenti non AP.
Eppure, ci sono due ragioni che rendono troppo semplicistico affermare semplicemente che il programma AP porta benefici accademici. Il primo è che il programma AP, come molti programmi educativi, ha molte componenti, ed è spesso difficile dire quale / i porta a benefici accademici. In secondo luogo, gli studenti spesso scelgono se seguire i corsi AP, e gli studenti AP spesso differiscono dagli studenti non-AP in modi importanti. Ciò confonde l'impatto del programma con differenze preesistenti tra i due gruppi di studenti. Un recente studio condotto dal mio gruppo di ricerca (Warne, Larsen, Anderson e Odasso, in stampa) illustra bene entrambi i punti.
Un sacco di "Parti in movimento"
I programmi educativi sono raramente semplici. Spesso includono molte "parti mobili", di cui una parte contribuisce al programma nel suo complesso. Può essere difficile per i ricercatori determinare quali componenti di un programma educativo sono efficaci nell'incrementare l'apprendimento e quali non sono importanti. Nel programma AP, ad esempio, ci sono 34 test che coprono argomenti di livello universitario che vanno dall'inglese, alle statistiche, alla teoria musicale, alla storia del mondo. Ognuno di questi argomenti ha un curriculum e un test AP standardizzato, e ogni classe ha un insegnante che crea compiti, progetta test e prepara gli studenti per il test. Le caratteristiche di scuola, distretto e stato possono anche contribuire al funzionamento di un programma.
Nel nostro studio del programma AP, i miei coautori e io abbiamo deciso di isolare un componente del programma AP: il test. Volevamo investigare se il semplice fatto di iscriversi a una classe AP portasse a guadagni accademici per gli studenti o se fosse necessario che gli studenti facessero il test AP. Per fare ciò, abbiamo utilizzato un set di dati con oltre 90.000 studenti delle scuole superiori e abbiamo suddiviso gli studenti in quattro gruppi: (a) studenti non AP, (b) studenti AP che non hanno sostenuto il test AP, (c) Studenti AP che hanno superato il test ma non hanno superato e (d) studenti AP che hanno superato e superato il test AP.
Abbiamo confrontato i punteggi ACT dei quattro gruppi di studenti. Se la classe stessa fosse un componente attivo, allora dovrebbe esserci una differenza nei punteggi ACT tra i gruppi (a) e (b). Se il test fosse un componente attivo, il gruppo (c) dovrebbe avere un punteggio ACT più alto del gruppo (b). Abbiamo riscontrato che i punteggi ACT medi erano 21,0 per il gruppo (a), 21,3 per il gruppo (b), 22,5 per il gruppo (c) e 26,5 per il gruppo (d). I risultati indicano che l'iscrizione alla classe AP offre agli studenti un piccolo beneficio (0,3 punti sul sacco a 36 punti ACT), ma che il test fornisce benefici maggiori (1,2 punti).
Differenze degli studenti preesistenti
In superficie, i risultati del paragrafo precedente sembrano indicare che sia la classe che il test sono efficaci, sebbene il test abbia chiaramente l'impatto più forte. Ma il problema con questo tipo di confronto è che questi quattro gruppi di studenti non sono equivalenti, perché gli studenti scelgono se iscriversi ai corsi AP. Pertanto, gli studenti AP sono diversi dagli studenti non AP (Sadler & Sonnert, 2010). Gli psicologi chiamano questa auto-selezione, ed è molto comune in molti rami della ricerca psicologica. In effetti, ci sono due livelli di auto-selezione che i ricercatori devono considerare quando studiano il programma AP perché gli studenti AP hanno anche la possibilità di sostenere il test. Le ragioni per l'auto-selezione nel programma AP o per sostenere il test AP sono spesso poco chiare, ma le politiche amministrative (come la decisione dello stato di pagare la quota di AP per gli studenti o la decisione di una scuola di offrire una particolare classe AP) e le caratteristiche degli studenti ( come la preparazione di uno studente per il test) sembra importare.
Per gestire l'auto-selezione, è necessario controllare le differenze degli studenti preesistenti. Ricercatori precedenti (ad esempio, Long, Conger, e Iatarola, 2012; Sadler & Sonnert, 2010) hanno controllato le variabili in cui i gruppi di studenti differiscono. Ad esempio, gli studenti di AP tendono ad avere medie più alte dei voti medi (GPA), sono spesso più motivati e hanno meno probabilità di provenire da case a basso reddito. Senza il controllo di variabili come queste, l'impatto del programma AP sarebbe confuso con le differenze tra i gruppi di studenti.
Nel nostro studio, abbiamo controllato per circa 70 variabili studentesche, tra cui sesso, razza / gruppo etnico, media dei voti, punteggi dei test di rendimento scolastico e se il bambino era in un'istruzione speciale. Abbiamo poi confrontato i punteggi ACT di quattro gruppi dopo aver effettuato questi aggiustamenti statistici. Gli studenti non in AP avevano un punteggio ACT medio di 21.4. Gli studenti AP che non hanno sostenuto il test AP hanno ottenuto un punteggio medio di ACT pari a 21.2. Gli studenti AP che non hanno superato il test AP avevano un punteggio ACT medio di 21,7. Infine, gli studenti AP che hanno superato il test AP hanno ottenuto un punteggio ACT medio di 24.6.
Confrontando questi risultati con i risultati non aggiustati si dimostra l'importanza di apportare queste modifiche. Il vantaggio di prendere la classe AP evapora (come mostrato nella differenza di punteggio tra i primi due gruppi) e l'impatto del test scende da 1,2 punti a 0,5 punti – oltre il 50%. Senza il controllo delle differenze preesistenti, il programma AP sembra molto più efficace di quanto non sia in realtà. Alla fine, i miei coautori e io abbiamo capito che il test AP è una componente importante del programma AP. Inoltre, gli studenti che superano il test ricevono più benefici rispetto ai loro compagni di classe che non eseguono il test AP, o che effettuano il test e non lo superano.
Conclusione
Questo studio è un esempio delle sfide di valutazione e comprensione dei programmi educativi. Le molte componenti di alcuni programmi educativi e le differenze preesistenti tra gruppi di studenti presentano sfide agli psicologi dell'educazione. Ma le sfide non sono insormontabili. Invito i lettori a indagare sull'articolo originale oa guardare un video che ho fatto sullo studio. Entrambi sono disponibili (gratuitamente) agli URL seguenti:
Articolo completo: http://www.tandfonline.com/doi/pdf/10.1080/00220671.2014.917253
Riepilogo del video: https://www.youtube.com/watch?v=aViwSlcu2F0
Riferimenti
Sadler, PM, & Sonnert, G. (2010). Liceo Adanced Placement e successo in corsi universitari nelle scienze. In PM Sadler, G. Sonnert, RH Tai e K. Klopfenstein (a cura di), AP: Un esame critico del Programma di collocamento avanzato (pagine 119-137). Cambridge, MA: Harvard Education Press.
Long, MC, Conger, D., e Iatarola, P. (2012). Effetti del corso di scuola secondaria che si basa sul successo secondario e post-secondario. American Research Journal Journal, 49, 285-322. doi: 10,3102 / 0002831211431952
Warne, RT, Larsen, R., Anderson, B., & Johnson, AO (in corso di stampa). L'impatto della partecipazione al programma Advanced Placement sui punteggi dei test di ammissione al college degli studenti. Il diario della ricerca educativa. doi: 10,1080 / 00220671.2014.917253
