Reagerer lærernes indsats på evaluering?: Evidence from a policy allowing low-scoring students to be re-tested (2017-2019)
Jacobs Foundation
Fokus i vores forskning er, om og hvordan incitamenterne i evaluerings- og ansvarlighedsprogrammer påvirker lærernes arbejdsbeslutninger og dermed elevernes læring. I det foreslåede projekt er vores primære mål empirisk: at estimere den kausale effekt af en ændring i ansvarlighedspolitikken, der giver skoler mulighed for at teste elever, der i første omgang ikke bestod prøven, igen, på væksten i testresultater for alle elever. Denne politik for omprøver har betydning for to lærerbeslutninger, der er afgørende for elevernes læring: (i) hvordan lærerne fordeler deres tid, indsats og opmærksomhed på de forskellige elever, og (ii) om lærerne vælger at anvende strategier til at undervise efter prøven, som øger prøveresultaterne uden en tilsvarende stigning i læringen. Vi foreslår at undersøge mere end et årti af data fra North Carolina, hvor lærere og skoler holdes ansvarlige for den andel af deres elever, der består årsprøverne. Fra 2009-2012 testede skolerne de elever, der i første omgang ikke bestod prøverne, på ny, og derefter blev kun den højeste af de oprindelige og de fornyede testresultater anvendt i ansvarlighedsmålingen. Vi vil estimere virkningen af politikken for omprøver på alle elever på tværs af fordelingen af præstationerne og ikke kun virkningen på de elever, der er blevet omprøvet. En hypotese er f.eks., at omprøvning reducerer presset for at fokusere undervisningsindsatsen uretmæssigt på de marginale elever elever elever, der måske eller måske ikke består i månederne før den oprindelige prøve, og at lærerne således kan yde en relativt større indsats for de infra-marginale elever, herunder de højt præsterende elever med ringe risiko for at dumpe.
Using Teacher Evaluation Data to Drive Instructional Improvement (Brug af data fra lærerevaluering til at fremme undervisningsforbedringer): Evidens fra evalueringspartnerskabsprogrammet i Tennessee (2015-2020)
IES
Evalueringspartnerskabsprogrammet (EPP), der i øjeblikket er ved at blive udvidet til hele staten af Tennessee Department of Education (TDOE), er designet til at forbedre lærernes arbejdsindsats varigt ved at parre lærere i etårige arbejdspartnerskaber, der fokuserer på at behandle den feedback om præstationerne, der modtages i formelle, klasseværelsesobservationsbaserede evalueringer. Kort sagt matches en lærer med lave evalueringsscorer inden for et bestemt område af undervisningspraksis (f.eks. spørgsmål eller lektionsstruktur og tempo) med en partnerlærer på samme skole, som har høje evalueringsscorer inden for de samme områder af praksis. Partnerskabet opfordres til at drøfte evalueringsresultater, observere hinandens undervisning, udveksle strategier og taktikker og følge op på hinanden. EPP blev udviklet i et partnerskab mellem TDOE og forskere (John Papay og John Tyler fra Brown University og Eric Taylor, der nu arbejder for HGSE). Resultaterne af en pilottest af EPP er opmuntrende. På skoler, der tilfældigt blev tildelt EPP, blev elevernes testresultater forbedret (0,08 elevernes standardafvigelser i læsning og matematik), lærernes observerede praksis blev forbedret, og lærernes holdninger til evaluering af præstationer blev forbedret. Det nuværende forslag til tilskud vil udvide den eksperimentelle evaluering af EPP, undersøge programmets virkninger i hele staten og afprøve hypoteser om mekanismer. Evalueringen med tilfældig tildeling vil blive udvidet til at omfatte alle ca. 1 800 skoler i Tennessee (halvdelen vil blive tildelt EPP, den anden halvdel vil blive tildelt en “business-as-usual”-kontrolgruppe). Det er også hensigten, at projektet skal give oplysninger om bredere spørgsmål om opskalering af lovende praksis til statsdækkende programmer, herunder spørgsmål om, hvorfor skoler vælger at deltage eller ikke vælger at deltage. Endelig omfatter forslaget om tilskud udtrykkeligt fortsatte og udvidede partnerskaber mellem TDOE og forskere på Brown, HGSE og Vanderbilt, bl.a. med henblik på at opbygge forsknings- og evalueringskapacitet i TDOE.