Does teacher effort respond to evaluation? Evidence from a policy allowing low-scoring students to be re-tested (2017-2019)
Jacobs Foundation
Im Mittelpunkt unserer Forschung steht die Frage, ob und wie die Anreize von Evaluierungs- und Rechenschaftsprogrammen die Arbeitsentscheidungen von Lehrern und damit das Lernen von Schülern beeinflussen. In dem vorgeschlagenen Projekt ist unser primäres Ziel empirisch: die Schätzung der kausalen Auswirkungen einer Änderung in der Rechenschaftspflichtpolitik, die es Schulen erlaubt, Schüler, die die Prüfung zunächst nicht bestanden haben, erneut zu testen, auf das Wachstum der Testergebnisse aller Schüler. Diese Wiederholungsprüfung wirkt sich auf zwei Entscheidungen der Lehrer aus, die für das Lernen der Schüler entscheidend sind: (i) wie die Lehrer ihre Zeit, ihren Einsatz und ihre Aufmerksamkeit auf die verschiedenen Schüler aufteilen; und (ii) ob die Lehrer sich dafür entscheiden, Strategien zu verwenden, die die Testergebnisse erhöhen, ohne dass der Lernzuwachs gleich groß ist. Wir schlagen vor, mehr als ein Jahrzehnt an Daten aus North Carolina zu untersuchen, wo Lehrer und Schulen für den Anteil ihrer Schüler verantwortlich sind, die die Prüfungen am Jahresende bestehen. Von 2009 bis 2012 haben die Schulen Schüler, die die Prüfungen zunächst nicht bestanden hatten, erneut getestet, und nur der höhere Wert aus ursprünglichem und erneutem Test wurde für die Rechenschaftslegung herangezogen. Wir werden die Auswirkungen der Wiederholungsprüfung auf alle Schüler in der gesamten Leistungsverteilung schätzen, nicht nur die Auswirkungen auf die Schüler, die erneut geprüft werden. Eine Hypothese ist zum Beispiel, dass die Wiederholungsprüfung den Druck verringert, die Unterrichtsanstrengungen unangemessen auf die marginalen Schüler zu konzentrieren, die in den Monaten vor der ersten Prüfung bestehen oder nicht bestehen können, und dass die Lehrer daher relativ mehr Anstrengungen auf die nicht marginalen Schüler verwenden können, einschließlich der leistungsstarken Schüler, die kaum Gefahr laufen, durchzufallen.
Using Teacher Evaluation Data to Drive Instructional Improvement: Evidence from the Evaluation Partnership Program in Tennessee (2015-2020)
IES
Das Evaluation Partnership Program (EPP), das derzeit vom Tennessee Department of Education (TDOE) landesweit ausgeweitet wird, soll die Arbeitsleistung von Lehrern nachhaltig verbessern, indem Lehrer in einjährigen Arbeitspartnerschaften zusammengebracht werden, die sich auf das Leistungsfeedback konzentrieren, das sie bei der formalen, auf Unterrichtsbeobachtung basierenden Bewertung erhalten. Kurz gesagt, eine Lehrkraft mit niedrigen Bewertungsergebnissen in einem bestimmten Bereich der Unterrichtspraxis (z. B. Fragestellung oder Unterrichtsstruktur und -verlauf) wird mit einer Partnerlehrkraft derselben Schule zusammengebracht, die in denselben Bereichen hohe Bewertungsergebnisse erzielt hat. Die Partnerschaft wird ermutigt, die Bewertungsergebnisse zu diskutieren, den Unterricht des anderen zu beobachten, Strategien und Taktiken auszutauschen und sich gegenseitig zu unterstützen. EPP wurde in einer Partnerschaft zwischen dem TDOE und Forschern (John Papay und John Tyler von der Brown University und Eric Taylor, jetzt bei HGSE) entwickelt. Die Ergebnisse eines Pilotversuchs mit EPP sind ermutigend. In Schulen, die nach dem Zufallsprinzip dem EPP zugewiesen wurden, verbesserten sich die Testergebnisse der Schüler (0,08 Standardabweichungen im Lesen und in Mathematik), die von den Lehrern beobachteten Praktiken verbesserten sich und die Einstellung der Lehrer zur Leistungsbewertung verbesserte sich. Mit dem aktuellen Antrag wird die experimentelle Bewertung des EPP ausgeweitet, um die Auswirkungen des Programms auf landesweiter Ebene zu untersuchen und Hypothesen über die Mechanismen zu testen. Die nach dem Zufallsprinzip durchgeführte Evaluierung wird auf alle ca. 1 800 Schulen in Tennessee ausgeweitet (die Hälfte der Schulen wird für die Durchführung des EPP ausgewählt, die andere Hälfte für eine Kontrollgruppe, die sich an den üblichen Bedingungen orientiert). Das Projekt soll auch Aufschluss über allgemeinere Fragen zur Ausweitung vielversprechender Praktiken auf landesweite Programme geben, einschließlich der Frage, warum sich Schulen für oder gegen eine Teilnahme entscheiden. Schließlich sieht der Antrag ausdrücklich die Fortsetzung und Ausweitung von Partnerschaften zwischen der TDOE und Forschern an der Brown, der HGSE und der Vanderbilt vor, auch um Forschungs- und Bewertungskapazitäten bei der TDOE aufzubauen.