Er skoler, der har stærke testresultater, meget effektive, eller indskriver de for det meste elever, der allerede er godt forberedte på succes? En undersøgelse, der er medforfattet af MIT-forskere, konkluderer, at bredt udbredte kvalitetsvurderinger af skoler afspejler deres elevers forberedelse og familiebaggrund lige så meget eller mere end en skoles bidrag til læringsgevinster.
Faktisk finder undersøgelsen, at mange skoler, der modtager relativt lave vurderinger, klarer sig bedre, end disse vurderinger ville antyde. Konventionelle vurderinger, viser forskningen klart, er stærkt korreleret med race. Specifikt er mange offentliggjorte skolevurderinger meget positivt korrelerede med andelen af eleverne, der er hvide.
"En skoles gennemsnitlige resultater afspejler til en vis grad den demografiske blanding af befolkningen, den betjener," siger MIT-økonom Josh Angrist, en nobelprisvinder, som længe har analyseret uddannelsesresultater. Angrist er medforfatter til "Race and the Mismeasure of School Quality", der optræder i American Economic Review:Insights .
Undersøgelsen, som undersøger skoledistrikterne i Denver og New York City, har potentialet til at forbedre den måde, skolekvalitet måles på, markant.
I stedet for rå aggregerede mål som testresultater bruger undersøgelsen ændringer i testresultater og en statistisk justering for racesammensætning til at beregne mere nøjagtige mål for de årsagsmæssige virkninger, som at gå på en bestemt skole har på elevernes læringsgevinster. Denne metodologisk sofistikerede forskning bygger på det faktum, at Denver og New York City begge tildeler elever til skoler på måder, der gør det muligt for forskerne at efterligne betingelserne for et randomiseret forsøg.
Ved at dokumentere en stærk sammenhæng mellem aktuelt anvendte vurderingssystemer og race, finder undersøgelsen, at hvide og asiatiske elever har en tendens til at gå på højere bedømte skoler, mens sorte og latinamerikanske elever har tendens til at blive grupperet på lavere bedømte skoler.
"Simple mål for skolekvalitet, som er baseret på den gennemsnitlige statistik for skolen, er uvægerligt stærkt korreleret med race, og disse mål har en tendens til at være en vildledende guide til, hvad du kan forvente ved at sende dit barn til den skole," siger Angrist .
Artiklens forfattere er Angrist, Ford-professor i økonomi ved MIT; Peter Hull, professor i økonomi ved Brown University; Parag Pathak, klassen i 1922 professor i økonomi ved MIT; og Christopher Walters Ph.D., en lektor i økonomi ved University of California i Berkeley. Angrist og Pathak er begge professorer i MIT Department of Economics og medstiftere af MIT's Blueprint Labs, en forskningsgruppe, der ofte undersøger skolepræstationer.
Undersøgelsen bruger data fra Denver og New York Citys offentlige skoledistrikter, hvor 6.-klasser ansøger om pladser på visse mellemskoler, og distrikterne bruger et skoleopgavesystem. I disse distrikter kan eleverne vælge en hvilken som helst skole i distriktet, men nogle skoler er overtegnet. Under disse omstændigheder bruger distriktet et tilfældigt lotterinummer til at bestemme, hvem der får en plads hvor.
I kraft af lotteriet i sædetildelingsalgoritmen deltager ellers lignende sæt af elever tilfældigt i en række forskellige skoler. Dette letter sammenligninger, der afslører årsagsvirkninger af skolegang på læringsgevinster, som i et randomiseret klinisk forsøg af den slags, der bruges i medicinsk forskning. Ved hjælp af matematiske og engelske testresultater evaluerede forskerne elevernes fremskridt i Denver fra 2012-2013 gennem skoleårene 2018-2019 og i New York City fra 2016-2017 gennem 2018-2019 skoleår.
Disse skoleopgavesystemer er tilfældigvis mekanismer, som nogle af forskerne har hjulpet med at konstruere, hvilket giver dem mulighed for bedre at forstå og måle effekterne af skoleopgaver.
"Et uventet udbytte af vores arbejde med at designe Denver og New York Citys centraliserede valgsystemer er, at vi ser, hvordan eleverne rationeres fra [fordelt på] skoler," siger Pathak. "Dette fører til et forskningsdesign, der kan isolere årsag og virkning."
I sidste ende viser undersøgelsen, at meget af skole-til-skole variationen i rå samlede testresultater stammer fra typerne af elever på en given skole. Dette er et tilfælde af, hvad forskere kalder "selektionsbias". I dette tilfælde opstår selektionsbias fra det faktum, at mere gunstigt stillede familier har en tendens til at foretrække de samme skolesæt.
"Det grundlæggende problem her er selektionsbias," siger Angrist. "I tilfælde af skoler er udvælgelsesbias meget konsekvens og en stor del af det amerikanske liv. Mange beslutningstagere, uanset om de er familier eller politiske beslutningstagere, bliver vildledt af en slags naiv fortolkning af dataene."
Faktisk, bemærker Pathak, skaber overvægten af mere forenklede skolevurderinger i dag (findes på mange populære websteder) ikke kun et vildledende billede af, hvor meget værdi skoler tilføjer for eleverne, men har en selvforstærkende effekt – da velforberedte og bedre- familier byder boligudgifter op i nærheden af højt vurderede skoler. Som de lærde skriver i avisen, "Forspændte vurderingsordninger leder husholdninger til skoler med lav minoritet frem for højkvalitetsskoler, mens de straffer skoler, der forbedrer præstationer for dårligt stillede grupper."
Forskerholdet håber, at deres undersøgelse vil føre til, at distrikter undersøger og forbedrer måden, de måler og rapporterer om skolekvalitet. Til det formål arbejder Blueprint Labs sammen med New York City Department of Education for at pilotere et nyt vurderingssystem senere i år. De planlægger også yderligere arbejde med at undersøge, hvordan familier reagerer på forskellige former for information om skolekvalitet.
I betragtning af at forskerne foreslår at forbedre vurderinger på en, hvad de mener er en ligetil måde, ved at tage højde for elevernes forberedelse og forbedring, tror de, at flere embedsmænd og distrikter kan være interesserede i at opdatere deres målepraksis.
"Vi håber på, at den simple regressionsjustering, vi foreslår, gør det relativt nemt for skoledistrikterne at bruge vores mål i praksis," siger Pathak.
Flere oplysninger: Joshua Angrist et al., Race and the Mismeasure of School Quality, American Economic Review:Insights (2024). DOI:10.1257/aeri.20220292
Leveret af Massachusetts Institute of Technology
Sidste artikelSikring af en etisk fremtid for kunstig intelligens i uddannelse
Næste artikelØkonomisk præstation af vinproduktion i EU