Неке школе су много боље од других у затварању јаза у постигнућима између својих ученика у предности и у неповољном положају

Резиме пословног плана

Недавна истраживања показују да је разлика у резултатима теста између ученика са релативно добрим и релативно неповољним положајем много већа у неким школским окрузима него у другим окрузима. Али измерени квалитет школе често драматично варира унутар школског округа, и стога је важно знати да ли се поједине школе разликују у релативном успеху ученика у предности и у неповољном положају. Користимо детаљне, повезане податке о рођењу и школској евиденцији на Флориди да бисмо истражили степен у којем је то тачно.





карта руте Џона Кабота

Налазимо да се школе драматично разликују у релативном успеху ученика у предности и у неповољном положају, и да се различите школе у ​​оквиру истог школског округа значајно разликују у погледу разлика у успеху у предностима и у неповољном положају. У неким школама, ученици у предности и у неповољном положају пролазе посебно добро; док у другим школама обе пролазе посебно лоше; док у трећима једна група ради релативно добро, а друга група релативно лоше. Истражујемо да ли се ове разлике међу школама могу објаснити разликама у релативној спремности ученика у обданишту у предностима и у неповољном положају, и налазимо да је мало вероватно да ће предшколска припрема објаснити разлике између школа које налазимо. Штавише, налазимо да укупни нивои предности школе нису повезани са разликама између нивоа успеха ученика у предности и у неповољном положају.



Наши налази показују да креатори политике треба да посвете много већу пажњу пракси појединачних школа, а не да се концентришу искључиво на политике и интервенције које се обично спроводе на нивоу округа. Штавише, међушколске разлике у релативном успеху ученика у предности и у неповољном положају заговарају доношење политика одговорности школа које осветљавају успех специфичних популација, уместо да се концентришу само на свеукупне нивое успеха или добитке у целој школи.




Увод

Социоекономске разлике у учинку ученика су добро познате и опширно документоване.једнаКао само један пример: на националном нивоу, 13-годишњи студенти чији су родитељи дипломирани факултети постигли су више од четири петине стандардне девијације на математичкој процени Националне процене образовног напретка (НАЕП) у 2012. него они чији су родитељи постигли да не заврши средњу школу.дваУ науци 2015. исти јаз је такође био преко четири петине стандардне девијације.3Исто тако, јаз у резултатима теста између деце из богатих и сиромашних породица у Сједињеним Државама се временом повећао и сада је изнад пуне стандардне девијације.4



Важан нови рад Риардона и његових сарадника показује да нису само резултати теста5али и расне разлике у резултатима тестова6драматично варирају у америчким школским окрузима. У овом последњем документу, Реардон и коаутори извештавају да док расне/етничке разлике у резултатима тестова у просеку износе око 0,6 стандардне девијације у свим школским окрузима, у неким окрузима разлике готово да и не постоје, док у другима прелазе 1,2 стандардне девијације. Постоје многа потенцијална објашњења за ову варијацију између дистрикта у недостатку постигнућа, укључујући расне разлике у социоекономском статусу, разлике у расној/етничкој сегрегацији, разлике у квалитету школе и сусједства и слично; а досадашњи докази о томе који су водећи узроци ове варијације су дескриптивни, а не узрочни. Ипак, остаје чињеница да су на неким местима расне/етничке и социоекономске разлике изузетно веће него на другим местима. Ове разлике су такође у корелацији са важним дугорочним економским исходима као што је документовано у новом раду Цхеттија и коаутора, где налазе сугестивне доказе да квалитет школа – како се оцењује према резултатима, а не инпутима – игра улогу у мобилности навише.7



Али знамо да постоје огромне варијације у квалитету школа унутар школских округа.8Ова варијација нас наводи на сумњу да постоје неке школе у ​​којима ученици са релативно добрим успехом раде добро, али ученици у релативно неповољном положају раде лоше, друге школе у ​​којима је обрнуто, друге школе у ​​којима и ученици са релативно добрим и релативно неповољним положајем раде добро, и још неке школе у ​​којима и ученици са релативно добрим и релативно неповољним положајем раде лоше. Штавише, сматрамо да постоје значајне разлике у овим обрасцима међу школама у оквиру истог школског округа. Ако је то тачно, онда то сугерише да креатори политике треба да обрате много већу пажњу на праксу појединих школа уместо да се концентришу искључиво на политике и интервенције које се обично примењују на нивоу округа. А ово би такође указало на вредност увођења политике одговорности школе која осветљава одређене популације ученика, уместо да се концентрише само на свеукупне нивое учинка или добитке.9



У овом извештају користимо изванредне податке о нивоу ученика који комбинују податке из матичне књиге рођених деце са њиховим образовним досијеима које су одељења за образовање и здравство Флориде спојила за потребе овог истраживачког програма, и израчунавамо учинак на нивоу школе релативно доброг и релативног студенти у неповољном положају.10Могућност упаривања школске евиденције деце са њиховим изводима из матичне књиге рођених пружа могућности за много детаљнију меру социоекономске предности или мана него што се може приметити из школских евиденција, које обично укључују само право на бесплатан ручак или ручак по сниженој цени. Комбинујемо информације о нивоима образовања родитеља, брачном статусу и структури породице и статусу сиромаштва у тренутку рођењаЈеданаестда се конструише континуирани индекс социоекономског статуса у време рођења.12Истражујемо степен до којег школе варирају у јазу између ученика високог и ниског социоекономског статуса, а затим видимо да ли се ове разлике могу објаснити разликама у предшколској припреми ученика високог и ниског социоекономског статуса. Затим истражујемо да ли се школе разликују по томе у којој мери ученици у релативно неповољном положају сустижу ученике са релативно добрима (или заостају даље), и истражујемо степен до којег се разлике које примећујемо јављају унутар школских округа, а не само између ових округа. Налазимо да постоје велике разлике на нивоу школе дуж свих ових димензија које се не објашњавају разликама у релативној школској припреми ученика у предности и у неповољном положају, и да се веома значајне разлике јављају међу школама у оквиру истог округа. Стога, ми тврдимо да политике и праксе на нивоу школе морају, у одређеном степену, да проузрокују разлике у релативном успеху ученика у предности и у неповољном положају.

Колико се школе разликују у јазу између ученика високог и ниског социоекономског статуса?

Почињемо са документовањем степена до којег се школе разликују у јазу између ученика са високим и ниским социоекономским статусом (СЕС). За ову анализу ограничавамо нашу пажњу на школе које имају разуман степен хетерогености – најмање три ученика у свакој кохорти рођених који долазе из сва четири квартила дистрибуције социо-економског статуса: 568 основних школа у држави Флорида задовољава овај критеријум хетерогености истовремено у трећем и петом разреду.13Наш резултат интересовања је резултат трећег или петог разреда на Флориди свеобухватног теста процене (ФЦАТ)14узето у релевантној години између 1999. и 2012., коју стандардизујемо широм државе на нивоу разреда и године да има средњу вредност нула и стандардну девијацију од један.



Слика 1. Просечни резултати тестова на нивоу школе за ученике из горњег и доњег квартила СЕС-а



А. Разред 3

ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_1а



Б. Разред 5



ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_1б

Слика 1 приказује дијаграме расејања просечних резултата на тестовима читања и математике у трећем и петом разреду за ученике у горњем квартилу дистрибуције социо-економског статуса у односу на оне у доњем квартилу дистрибуције социоекономског статуса у истој школи. Свака тачка представља једну од 568 основних школа у узорку анализе. Типичан ученик са високим СЕС-ом у овом узорку постигао је око 0,6 до 0,7 стандардних девијација изнад државног просека (у зависности од оцене), док је типичан ученик са ниским СЕС-ом у узорку постигао око 0,1 до 0,2 стандардне девијације испод државног просека. (Ученици са ниским СЕС-ом у скупу хетерогених школа за које сматрамо да су у већој предности од популације ученика са ниским СЕС-ом у целини, стога је њихов просечан учинак само скромно испод државног просека. Такође постоје релативно хомогене школе на Флориди са и вишим и нижи просечни укупни резултати теста које искључујемо из ове анализе.)



Прво што је одмах уочљиво јесте да је корелација између успеха ученика са високим СЕС-ом и успеха ученика са ниским СЕС-ом у истој школи позитивна, али релативно скромна (0,34 и 0,27 у трећем и петом разреду, респективно). Четири квадранта сваког графикона, дефинисана на основу средњих вредности обе осе, представљају школе у ​​којима ученици са високим СЕС и ниским СЕС имају посебно добре резултате (горе десно), где оба имају посебно лош учинак (доле лево), где ученици са високим СЕС раде посебно добро, али ученици са ниским СЕС имају посебно лоше резултате (доле десно), и тамо где ученици са ниским СЕС имају посебно добре резултате, али ученици са високим СЕС посебно лоше (горе лево). Постоји много школа у сва четири квадранта ових графикона, укључујући преко 200 школа које се налазе у вандијагоналним квадрантима. Међу школама у којима ученици са ниским СЕС-ом имају резултате знатно изнад просека (рецимо, боље од 0,2 стандардне девијације изнад државног просека), ученици петог разреда са високим СЕС-ом у неким школама имају чак 0,6 стандардних девијација изнад државног просека, док у другим школама имају чак 1,2 стандардне девијације изнад државног просека. Међу школама у којима ученици са високим СЕС-ом постижу резултате знатно изнад просека (рецимо, боље од једне стандардне девијације изнад државног просека), ученици петог разреда са ниским СЕС-ом у неким школама имају чак 0,6 стандардних девијација испод државног просека, док у другим школама имају чак 0,3 стандардне девијације изнад државног просека. Другим речима, постоје школе у ​​којима ученици са ниским СЕС-ом постижу веће резултате од ученика са високим СЕС-ом у бројним другим школама. Штавише, док је у неким случајевима јаз у СЕС тесту мањи од 0,3 стандардне девијације, у другим случајевима је јаз знатно изнад једне стандардне девијације.



Потенцијална улога породичног сортирања

Ова велика разлика између школа у недостатку у учинку СЕС-а може бити зато што различито образују ученике са високим и ниским СЕС-ом, или може бити да постоје велике фундаменталне разлике међу школама у релативној предшколској припреми ученика са високим и ниским СЕС-ом. -СЕС студенти. Немогуће је са сигурношћу знати колики је део ових разлика због сваког од ових објашњења, али административни подаци Флориде нам омогућавају да прво прођемо кроз ово питање. За пет од осам рођених кохорти које разматрамо, држава је на почетку школске године процењивала све вртиће да би утврдила да ли су ученици стигли у школу спремни за вртић. Генерално, око 80 посто вртића са ниским СЕС-ом и око 94 посто вртића са високим СЕС у овим хетерогеним школама на Флориди спремно је за обданиште, према држави.петнаест

Да бисмо први уболи у ово питање, рангирамо школе на основу јаза између стопа спремности за вртиће са високим и ниским СЕС-ом за школе за које смо такође израчунали просек за трећи и пети разред.16У 537 од 560 школа, ученици високог СЕС-а имају вишу стопу спремности за обданиште него ученици са ниским СЕС-ом, а разлике између њихових стопа спремности за вртић су често веома велике. У неким школама, ученици са високим и ниским СЕС улазе у школу са скоро идентичним стопама спремности за вртиће (или код ученика са ниским СЕС-ом чак имају малу предност у случају 18 школа). Али у другим школама, за више од 30 процентних поена већа је вероватноћа да ће вртићи са високим СЕС-ом кренути у школу спремни за обданиште од оних са ниским СЕС-ом (31 школа).

Слика 2. Асоцијације на нивоу школе између СЕС празнина у спремности обданишта и резултата тестова

А. Разред 3

ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_2а

Б. Разред 5

ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_2б

Колико добро ове празнине у СЕС-у у спремности обданишта предвиђају недостатке у СЕС-у у резултатима тестова у трећем или петом разреду? Као што се може видети на слици 2, школе које имају веће разлике у спремности за вртиће такође имају веће разлике у резултатима теста у трећем и петом разреду: како се јаз у спремности за вртић повећава за 10 процентних поена, јаз у резултатима теста се повећава за око 0,06 стандарда одступање. Али падине су још увек далеко од линије од 45 степени, а на сваком нивоу јаза у спремности вртића постоји веома велика варијација у разликама у резултатима тестова. За 20 школа са скоро нултим разликама у спремности за вртиће, разлике у резултатима тестова у разредима три и пет крећу се од мање од две петине стандардне девијације до више од пуне стандардне девијације. За 11 школа са недостатком у спремности за вртиће од око 30 процентних поена, разлике у резултатима тестова крећу се од мање од трећине стандардне девијације до преко 1,5 стандардне девијације. Укратко, док СЕС разлике у спремности за полазак у школу предвиђају СЕС разлике у резултатима тестова неколико година касније, чини се да се школе такође значајно разликују у томе шта се дешава деци са високим и ниским СЕС између поласка у вртић и крај основне школе.

Наша анализа укључује само школе са барем разумним степеном хетерогености. Неке од ових школа имају много више ученика са високим СЕС него ученика са ниским СЕС, а неке од ових школа имају много више ученика са ниским СЕС од ученика са високим СЕС. Да ли се разлике у резултатима тестова СЕС разликују у зависности од тога да ли је школа релативно богата или у релативно неповољном положају? На слици 3 повезујемо просечан ниво СЕС-а у школи са разликом у резултатима теста у трећем или петом разреду између ученика у горњем и доњем квартилу СЕС-а. Примећујемо да практично не постоји веза између релативног богатства целокупног ученичког тела школе и разлике у резултатима теста СЕС у тој школи: школе које служе првенствено ученицима са високим СЕС и оне које служе првенствено ученицима са ниским СЕС имају исти просечни СЕС празнине у резултатима тестова (око 0,8 стандардних девијација) иу трећем и у петом разреду. Све у свему, постоје велике варијације у оквиру школских типова у разликама у резултатима СЕС теста на нивоу школе, али скоро да нема разлике између типова школа (стратификованих по просечном ученичког СЕС-у) у јазу у СЕС тесту. (Напомињемо да смо такође истражили да ли је СЕС на нивоу школе повезан са СЕС јазом у стопама спремности за вртиће, и, као и код резултата тестова, не постоји веза између СЕС-а укупног ученичког тела школе и СЕС-а јаз у спремности за обданиште.) Према томе, не изгледа да нивои школских СЕС сами по себи утичу на степен до којег се ученици са високим СЕС и ниским СЕС разликују било по њиховом академском успеху или вероватноћи спремности за вртић.

Слика 3. Асоцијације на нивоу школе између просечног СЕС-а школе и јаза у резултатима теста између ученика из највишег и најнижег квартила СЕС-а

А. Разред 3

ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_3а

Б. Разред 5

ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_3б

Школе се разликују по стопама социо-економске конвергенције или дивергенције

На слици 4 приказујемо однос између раста резултата теста између трећег разреда (први разред тестиран у целој држави на Флориди) и петог разреда (обично последња година основне школе на Флориди) за ученике са високим СЕС и ученике са ниским СЕС. Хоризонтална оса одражава средњи раст резултата теста за ученике са високим СЕС, а вертикална оса одражава средњи раст резултата теста за ученике са ниским СЕС. Позитивну вредност можемо протумачити као представљање типичног ученика у СЕС групи у школи која постаје све популарнија у односу на њихове вршњаке из целе државе, а негативну вредност као представљање типичног ученика у СЕС групи у школи која губи тло у односу на њихове вршњаке из целе државе. Узгред, типичан релативни раст од трећег до петог разреда у овом скупу хетерогених школа је скромно негативан (око 0,1 стандардне девијације).

Слика 4. Асоцијације на нивоу школе у ​​порасту резултата теста за ученике из горњег и доњег квартила СЕС-а

ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_4

Прво што је јасно из овог графикона је да школе у ​​којима ученици са високим СЕС расту брже такође имају тенденцију да буду школе у ​​којима ученици са ниским СЕС расту брже, и обрнуто. Али у исто време, настављамо да видимо велике варијације у просечном расту ученика са ниским СЕС-ом за било који ниво раста ученика са високим СЕС-ом, или обрнуто. Међу школама у којима ученици са високим СЕС-ом падају око 0,2 стандардне девијације у односу на државни просек између трећег и петог разреда, постоје неке школе у ​​којима ученици са ниским СЕС-ом губе само око 0,1 стандардне девијације релативног нивоа, а друге у којима ученици са ниским СЕС-ом изгубити скоро 0,4 стандардне девијације релативног тла. Међу школама у којима ученици са високим СЕС-ом нити добијају релативну позицију нити назадују у односу на своје вршњаке у целој држави, постоје неке школе у ​​којима ученици са ниским СЕС-ом добијају око 0,05 стандардне девијације релативног нивоа, а друге у којима ученици са ниским СЕС-ом губе 0,24 стандардне девијације од релативно тло.

Само зато што једна група осваја другу у школи између трећег и петог разреда не значи нужно да школа доследно опслужује једну групу ученика боље од друге. То би, на пример, могло бити манифестација регресије на средњу вредност: негативан релативни добитак између трећег и петог разреда могао би бити одраз посебно јаких резултата теста у трећем разреду, а позитиван релативни добитак између трећег и петог разреда могао би да одражава посебно слаби резултати тестова за трећи разред. То такође може бити функција школа које служе различитим ученицима боље или лошије на различитим нивоима разреда. И, наравно, такође је могуће да школе које служе једној групи боље од друге у раним основним разредима такође служе истој групи боље од друге у каснијим основним разредима. Ипак, овај налаз указује на то да би креаторима политике било добро да пажљиво погледају специфичне праксе појединих школа у покушају да открију разлоге зашто се резултати тестова у неким школама слажу, а у другим разликују.

Да ли постоје варијације унутар или између школских округа?

Коначно, процењујемо степен до којег се разлике у релативним резултатима теста (или расту) ученика са високим СЕС у односу на ученике са ниским СЕС углавном јављају унутар школских округа или широм школских округа. Одговор на ово питање би нам помогао да боље разумемо где да осветлимо светло у вези са тим да ли ће политике и праксе на нивоу школских округа или политике и праксе на нивоу школе вероватно бити утицајнији у служењу као релативни лифтови за висок или низак СЕС -СЕС студенти.

Као први корак у овом процесу, посебно посматрамо десет највећих школских округа у држави. (Флорида има 67 школских округа на нивоу округа, а десет највећих округа се сврставају у 47 највећих школских округа у Сједињеним Државама, у смислу уписа ученика, укључујући седам од 25 највећих.) На слици 5 представљамо оквирне графиконе дистрибуција разлике у резултату теста високог-ниског-СЕС-а у трећем разреду, разлика у резултатима теста високог-ниског-СЕС-а у петом разреду и јаза у порасту резултата теста високог-ниског-СЕС-а за сваки од ових десет школских округа. Чврсти део дијаграма оквира представља интерквартилни опсег округа (то јест, опсег вредности од 25 округатхпроценат на 75 округатхперцентил) и линија представља опсег вредности од 10 округатхпроценат на 90 округатхперцентил. Да бисмо избегли идентификацију појединачних школских округа, представљамо десет школских округа по редоследу њиховог просечног јаза високог-ниског СЕС-а на релевантном графикону (означено наранџастим круговима); школски округи су према томе у различитим редоследима на сваком графикону.

Очигледно је са слике 5 да школски округи значајно варирају у разликама у резултатима теста између ученика са високим и ниским СЕС; ово није изненађујуће имајући у виду велике варијације међу дистриктима у расним/етничким јазовима које су пронађене у раду Реардона и његових колега поменутих у уводу.17Међу десет највећих школских округа на Флориди, просечна разлика у резултатима теста висок-ниски СЕС креће се од око 0,6 стандардних девијација до око 0,9 стандардних девијација у трећем и петом разреду, а јаз високог и ниског СЕС у порасту резултата теста креће се од нула до скоро једна десетина стандардне девијације. У неколико случајева, 25тхперцентил овог јаза у једном округу је приближно идентичан са 75тхперцентил у другом округу.

Слика 5. Варијације у СЕС празнинама у резултатима теста и порасту резултата теста у десет највећих школских округа Флориде

А. Разред 3

ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_5а

Б. Разред 5

ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_5б

Ц. Раст између 3. и 5. разреда

ЦЦФ_20170720_Фиглио_Евиденце_Спеакс_5ц

Али средњи јаз између округа пропушта веома велике разлике унутар округа. Међу сваким од десет највећих округа на Флориди, посматрани се крећу између 10тхи 90тхперцентил јаза у СЕС тесту је већи од уочене разлике између школског округа са највећим СЕС јазом и школског округа са најмањим СЕС јазом (међу десет највећих школских округа на Флориди, тј.). Чак и посматрани распон између 25тхи 75тхпроцентил разлике у резултату СЕС теста унутар школског округа је обично на истом нивоу као и распон између округа. Ови налази јасно показују да иако можемо научити огромну количину упоређивањем школских округа у смислу њихових расних, етничких или социоекономских разлика у резултатима тестова, постоји велики степен варијација у склопу школских округа и у њиховим празнинама у исходу.

Закључци и импликације

Ова анализа јасно показује да велике разлике у учинку ученика са високим СЕС и ученика са ниским СЕС у истим школама постоје; да ове очигледне празнине не одражавају само празнине у припреми; и да док су варијације између школских округа значајне, варијације унутар школских округа могу бити чак и веће (барем међу највећим окрузима на Флориди).

Ови налази пружају значајне лекције креаторима политике. Као прво, оне имају импликације на дизајн и примену политике одговорности школа. Неке школе посебно добро пролазе и са ученицима у предности и са угроженим ученицима, друге посебно лоше пролазе са обе групе, док друге и даље добро пролазе са једном групом, а лоше са другом. Образац разлика међу школама, широм и унутар школских округа, заговара доношење политика одговорности школа које држе школе одговорним за успех одређене популације, уместо да се концентришу само на свеукупне нивое успеха или добитке у целој школи.

Ови налази такође наглашавају важност пажљивог сагледавања праксе и наставне политике на нивоу школе, уместо да се концентришемо само на политике на нивоу округа. Разлике у спремности за вртиће свакако објашњавају велику количину разлика у учинку између ученика у предности и у неповољном положају – на нивоу популације и на нивоу школе – али изгледа да постоје велике разлике на нивоу школе које доприносе релативном успеху ученика у предности и у неповољном положају. студенти.

У међувремену, јаз између ученика у предностима и ученика у неповољном положају је изузетно сличан између школа са релативно богатим ученичким групама и оних са релативно неповољним ученичким групама. Ово указује на то да, иако постоји много разлога зашто школски округ и државе можда желе да покушају да интегришу ученике са релативно добрим и релативно неповољним положајем у оквиру исте школе, изгледа мало вероватно да је циљ политике смањења резултата теста јаз између студената у овим групама ће се реализовати кроз даљу социоекономску интеграцију (барем једном када дође до степена социоекономске интеграције неопходног да се за почетак буде део овог студија). Упозоравамо, међутим, да је наша анализа корелациона, а не узрочна, тако да ови обрасци налаза само сугеришу да разлике у резултатима социо-економских тестова остају релативно несмањене, без обзира на степен социоекономске интеграције на нивоу школе, и да су далеко од дефинитивног.