Does teacher effort respond to evaluation?: Evidence from a policy allowing low-scoring students to be re-tested (2017-2019)
Jacobs Foundation
De focus van ons onderzoek is of en hoe de prikkels van evaluatie- en verantwoordingsprogramma’s de taakbeslissingen van leraren en daarmee het leren van leerlingen beïnvloeden. In het voorgestelde project is onze primaire doelstelling empirisch: het schatten van het causale effect van een verandering in het verantwoordingsbeleid die scholen toestaat leerlingen die in eerste instantie zakken voor het examen opnieuw te testen op de toetsscore groei van alle leerlingen. Dit beleid van hertoetsen heeft gevolgen voor twee beslissingen van leraren die van cruciaal belang zijn voor het leren van leerlingen: (i) hoe leraren hun tijd, moeite en aandacht verdelen over verschillende leerlingen; en (ii) of leraren ervoor kiezen om “teach to the test”-strategieën te gebruiken die de toetsscores verhogen zonder een gelijke toename in leren. Wij stellen voor om meer dan tien jaar gegevens uit North Carolina te bestuderen, waar leraren en scholen verantwoordelijk worden gehouden voor het percentage van hun leerlingen dat slaagt voor het eindejaarsexamen. Van 2009-2012 hebben scholen leerlingen die aanvankelijk niet slaagden voor het examen, opnieuw getest, waarna alleen de hoogste van de oorspronkelijke en de hertestscore werd gebruikt in de verantwoordingsmaatstaf. Wij schatten het effect van het beleid inzake hertests op alle leerlingen over de gehele prestatieverdeling, en niet alleen het effect op de leerlingen die een hertest hebben ondergaan. Een van de hypotheses is bijvoorbeeld dat hertesten de druk vermindert om de onderwijsinspanningen overmatig te richten op de marginale leerlingen die al dan niet kunnen slagen in de maanden voor de eerste test, en dat de leraren daardoor relatief meer inspanningen kunnen leveren voor de infra-marginale leerlingen, met inbegrip van de leerlingen met hoge prestaties die weinig risico lopen te zakken.
Using Teacher Evaluation Data to Drive Instructional Improvement: Evidence from the Evaluation Partnership Program in Tennessee (2015-2020)
IES
The Evaluation Partnership Program (EPP), currently being scaled statewide by the Tennessee Department of Education (TDOE), is designed to lastingly improve teacher job performance by pairing teachers in year-long working partnerships focused on addressing the performance feedback received in formal, classroom-observation-based evaluation. In het kort komt het erop neer dat een leraar met lage evaluatiescores op een bepaald gebied van de lespraktijk (b.v. vragen stellen of lesstructuur en -planning) wordt gekoppeld aan een partnerleraar in dezelfde school die op dezelfde gebieden hoge evaluatiescores heeft. Het partnerschap wordt aangemoedigd om de evaluatieresultaten te bespreken, elkaars lessen te observeren, strategieën en tactieken uit te wisselen en met elkaar na te denken. EPP is ontworpen in een samenwerkingsverband tussen de TDOE en onderzoekers (John Papay en John Tyler aan de Brown University, en Eric Taylor nu aan de HGSE). De resultaten van een piloottest van EPP zijn bemoedigend. In scholen die willekeurig werden toegewezen aan EPP, verbeterden de testscores van leerlingen (0,08 standaarddeviaties voor lezen en rekenen), verbeterden de praktijken van leraren en verbeterde de houding van leraren ten aanzien van prestatie-evaluatie. Het huidige subsidievoorstel zal de experimentele evaluatie van EPP uitbreiden, de effecten van het programma op schaal van de hele staat onderzoeken en hypothesen over mechanismen testen. De willekeurige toewijzing van de evaluatie zal worden uitgebreid tot alle ongeveer 1.800 scholen in Tennessee (de helft wordt toegewezen om het EPP te implementeren, de andere helft aan een business-as-usual controle). Het project is ook bedoeld om informatie te verschaffen over bredere vragen over de schaalvergroting van veelbelovende praktijken naar programma’s voor de hele staat, met inbegrip van vragen over waarom scholen er wel of niet voor kiezen om deel te nemen. Ten slotte omvat het subsidievoorstel expliciet de voortzetting en uitbreiding van partnerschappen tussen TDOE en onderzoekers van Brown, HGSE en Vanderbilt, deels om onderzoeks- en evaluatiecapaciteit op te bouwen bij TDOE.