Czy wysiłek nauczyciela odpowiada na ocenę? Evidence from a policy allowing low-scoring students to be re-tested (2017-2019)
Jacobs Foundation
Nasze badania koncentrują się na tym, czy i jak bodźce programów ewaluacji i rozliczania wpływają na decyzje zawodowe nauczycieli, a tym samym na uczenie się uczniów. W proponowanym projekcie, nasz główny cel jest empiryczny: oszacowanie przyczynowego efektu jednej zmiany w polityce rozliczania pozwalającej szkołom na ponowne testowanie uczniów, którzy początkowo nie zdali egzaminu, na wzrost wyników testowych wszystkich uczniów. Ta polityka ponownego testowania ma wpływ na dwie decyzje nauczycieli, które mają kluczowe znaczenie dla uczenia się uczniów: (i) jak nauczyciele rozdzielają swój czas, wysiłek i uwagę pomiędzy różnych uczniów; oraz (ii) czy nauczyciele decydują się na stosowanie strategii nauczania do testu, które zwiększają wyniki testu bez równego wzrostu uczenia się. Proponujemy zbadanie ponad dekady danych z Karoliny Północnej, gdzie nauczyciele i szkoły są rozliczani z odsetka uczniów, którzy zdają egzaminy końcoworoczne. W latach 2009-2012 szkoły ponownie testowały uczniów, którzy początkowo nie zdali egzaminów, a następnie tylko wyższy z wyników pierwotnego i ponownego testu był wykorzystywany w miarach rozliczalności. Oszacujemy efekt polityki ponownego testowania na wszystkich uczniach w całym rozkładzie osiągnięć, a nie tylko efekt na uczniach, którzy są ponownie testowani. Jedną z hipotez jest na przykład to, że ponowne testy zmniejszają presję na nadmierne skupianie wysiłków dydaktycznych na marginalnych uczniach, którzy mogą lub nie mogą zdać w miesiącach poprzedzających test wstępny, a tym samym nauczyciele mogą włożyć relatywnie więcej wysiłku w uczniów inframarginalnych, w tym tych osiągających wysokie wyniki, którym niewiele grozi, że nie zdadzą.
Using Teacher Evaluation Data to Drive Instructional Improvement: Evidence from the Evaluation Partnership Program in Tennessee (2015-2020)
IES
Program Evaluation Partnership Program (EPP), obecnie skalowany w skali całego kraju przez Tennessee Department of Education (TDOE), ma na celu trwałą poprawę wyników pracy nauczycieli poprzez łączenie nauczycieli w roczne partnerstwa robocze skoncentrowane na rozwiązywaniu problemów z informacjami zwrotnymi dotyczącymi wyników pracy, otrzymywanymi w ramach formalnej oceny opartej na obserwacji klasy. W skrócie, nauczyciel z niskimi wynikami oceny w określonym obszarze praktyki instruktażowej (np. zadawanie pytań lub struktura lekcji i jej przebieg) jest dobierany w pary z nauczycielem partnerskim z tej samej szkoły, który ma wysokie wyniki oceny w tych samych obszarach praktyki. Partnerstwo jest zachęcane do omawiania wyników ewaluacji, obserwowania wzajemnego nauczania, dzielenia się strategiami i taktykami oraz wzajemnego monitorowania. EPP został zaprojektowany w ramach partnerstwa pomiędzy TDOE i naukowcami (John Papay i John Tyler na Uniwersytecie Browna oraz Eric Taylor obecnie w HGSE). Wyniki pilotażowego testu EPP są zachęcające. W szkołach losowo przydzielonych do EPP, wyniki testów uczniów poprawiły się (0.08 standardowych odchyleń uczniów w czytaniu i matematyce), obserwowane praktyki nauczycieli poprawiły się, a nastawienie nauczycieli do oceny wydajności poprawiło się. Obecna propozycja grantu rozszerzy eksperymentalną ocenę EPP, badając efekty programu w skali całego kraju i testując hipotezy dotyczące mechanizmów. Ocena losowa zostanie rozszerzona, aby objąć wszystkie około 1800 szkół w Tennessee (połowa przydzielona do wdrożenia EPP, druga połowa do kontroli business-as-usual). Projekt ma również na celu udzielenie informacji na temat szerszych pytań dotyczących skalowania obiecujących praktyk do programów ogólnokrajowych, w tym pytań dotyczących tego, dlaczego szkoły decydują się lub nie decydują się na uczestnictwo. Wreszcie, propozycja dotacji wyraźnie obejmuje kontynuację i rozszerzenie partnerstwa pomiędzy TDOE i naukowcami z Brown, HGSE i Vanderbilt, częściowo w celu budowania zdolności badawczych i ewaluacyjnych w TDOE.