Print Version
- Talking with Students about Evaluations
- Tips for Making Sense of Student Evaluation Feedback
- Mid-Semester Student Feedback and Other Strategies
- Resources on Interpreting Student Evaluations
- Summaries of Research on Student Evaluations
Talking with Students about Evaluations
A hallgatók motiválása a kurzus végi értékelések kitöltésére és hasznos visszajelzés nyújtása ezen értékeléseken keresztül, a Vanderbilt Center for Teaching azt javasolja az oktatóknak, hogy beszélgessenek a hallgatókkal a kurzusértékelések fontosságáról és azok felhasználásának módjáról.
- Jelöljön ki időt az órán a hallgatók számára az értékelések kitöltésére, és tudassa a hallgatókkal, hogy miért és mikor. (Erről a tanácsról bővebben alább olvashat.)
- Mondja el a hallgatóknak, hogy értékeli az őszinte és építő jellegű visszajelzéseiket, és hogy a hallgatók visszajelzéseit felhasználja a kurzusok fejlesztéséhez. Ha lehetséges, osszon meg példákat arra, hogyan változtatta meg kurzusait a hallgatói visszajelzések hatására.
- Tudassa hallgatóival, hogy a kurzusra vonatkozó pozitív és negatív visszajelzések egyaránt érdeklik. A kurzus és/vagy az oktatás mely aspektusai segítették őket a tanulásban? Milyen szempontokon lehetne változtatni, hogy a jövőbeli hallgatók hatékonyabban tanulhassanak?
- Írja le, milyen visszajelzéseket tart a leghasznosabbnak. A legtöbb esetben a konkrét, példákkal alátámasztott visszajelzés hasznosabb, mint az általános kijelentések. A konkrét, építő jellegű visszajelzésekre vonatkozó példákat a Michigani Egyetem Tanulási és Tanítási Kutatóközpontjának “Hasznos visszajelzés nyújtása az utasításoknak” című kézikönyvében talál.
- Emlékeztesse a hallgatókat, hogy az értékeléseket úgy tervezték, hogy teljesen anonimak legyenek, és hogy a végső jegyek leadásáig nem láthatja az értékeléseiket. Sok diák nincs tisztában ezekkel a tényekkel.
- Tudassa a diákokkal, hogy a visszajelzéseik elsődleges célközönsége Ön, de potenciálisan mások is el fogják olvasni az értékeléseiket, beleértve a tanszéki és iskolai adminisztrátorokat is. A kurzusértékelések szerepet játszanak a személyzeti értékelésekben és a tantervek tervezésében.
- Fontolja meg, hogy a tanmenetbe olyan szöveget foglaljon, amely a hallgatók értékeléseivel foglalkozik. Ez felhívja a hallgatók figyelmét arra, hogy a félév során nekik is figyelniük kell a tanulási tapasztalataikra, és jobban odafigyelnek a kurzusértékelésekben adott válaszaikra. Lehetséges példák.
A Vanderbilt professzorát, Kathleen Hoover-Dempsey-t, a pszichológia emeritus professzorát 2003-ban meginterjúvolták a hallgatói kurzusértékelésekről. Megkérdezték tőle, hogy szerinte a diákjai komolyan veszik-e a kurzusértékeléseket. Válasza:
Igen, szerintem a hallgatóim nagyon komolyan veszik. Azt hiszem, részben azért, mert azt mondom nekik, hogy komolyan veszem őket. Beütemezek egy időpontot, amikor megcsináljuk az értékelőlapot; előre közlöm a diákokkal, hogy nagyon fontosnak tartom, és elmondom nekik, hogy nagyon szeretném, ha mindannyian jelen lennének a kurzus értékelésénél. Elmondom nekik, hogy minden megjegyzést elolvasok, és rendkívül hasznosnak találom az észrevételeket a saját tanításom átgondolásához és javításához. Amikor kiosztom az értékelőlapokat, mindezeket megismétlem, és hozzáteszem: “Soha nem lehet eleget írni; minden visszajelzést nagyra értékelek, valóban elolvasom, és nagyon fontos számomra”. És aztán betartom az összes egyetemi irányelvet (például gyorsan kiviszem a tanteremből, miután azonosítottam, hogy ki fogja összegyűjteni és visszavinni a tanszéki irodába.)
Szóval igen, nagyon érdemi visszajelzést kapok, amit nagyon értékelek. Sok kurzuson, talán különösen a nagy kurzusokon, valószínűleg van legalább valaki, aki nem különösebben elégedett a kurzussal. Az ő visszajelzéseik nagyon-nagyon sokat segíthetnek abban, hogy átgondoljam, mit csinálhatnék másképp a kurzuson. Azt hiszem, ha hangsúlyozzuk, hogy nagyon komolyan vesszük a hallgatói észrevételeket, és nagyon hasznosnak tartjuk őket, az egyszerűen növeli annak valószínűségét, hogy minden hallgatótól nagyon hasznos visszajelzést kapunk.”
Miért jobb, ha az órán időt szánunk a hallgatói értékelésekre?
Azzal, hogy az órán 20 percet szánunk a hallgatóknak a kurzus értékelésének kitöltésére, ahogy az szokás volt, amikor az értékelés ceruzával és papírral történt, az oktatók nemcsak a hallgatók általános válaszadási arányát növelik, hanem annak valószínűségét is, hogy a hallgatóknak van idejük átgondolni a válaszaikat. Ennek eredményeképpen a hallgatóknak lehetőségük lesz arra, hogy kevésbé kapkodó, átgondoltabb visszajelzéseket adjanak, különösen, ha ezt a stratégiát az alábbiakban ajánlott egyéb stratégiákkal kombinálják. Az órai idő felhasználásával az oktatók így különbséget tehetnek a komoly, átgondolt, a kurzusértékeléshez megfelelő hozzászólások típusa és a közösségi médiában, a vásárlói visszajelzésekben és más online fórumokon gyakran előforduló rövid és spontán hozzászólások között. Végezetül, az órai idő elkülönítésével a hallgatók felé kommunikáljuk az értékelések fontosságát az egyetem oktatási küldetésében.
Azt is meg kell jegyezni, hogy amikor az órán időt szánunk a hallgatóknak a kurzusértékelések kitöltésére, az oktatóknak el kell hagyniuk a termet, hogy a hallgatók szabadon adhassanak hiteles válaszokat.
Making Sense of Student Evaluation Feedback
A Kathleen Hoover-Dempsey, a Vanderbilt Egyetem emeritus pszichológiaprofesszorának “Some Guidelines and Principles to Consider In Making Sense of Evaluation Feedback” című könyvéből átvéve.
Az új év újrakezdésével együtt sok oktatónak lehetősége nyílik arra, hogy értékelje tanítási képességeit, amikor megkapja a hallgatók értékelését őszi kurzusairól. A hallgatói visszajelzések értelmezése kihívást jelenthet, ezért az alábbi tippeket adjuk az értékelések vizsgálatához.
A hallgatói értékelések vizsgálatakor:
- Válasszon ki egy jó időpontot, amikor elég ideje lesz arra, hogy legalább az információk egy részét megeméssze, magánélete van, és adhat magának némi mentális “teret” az információk elemzéséhez.
- Követje nyomon a mennyiségi eredményeket. Fontolja meg, hogy az egyes tételekre kapott összefoglaló értékelés hogyan illeszkedik az Ön saját tanítási céljaihoz és a tanszékének a tanítással kapcsolatos elvárásaihoz.
- Kereszen mintákat a hallgatók megjegyzéseiben – ismerje fel a tendenciákat, jegyezze meg, mit csinált jól, és mi az, ami fejlesztésre szorul.
- Vegye figyelembe a tapasztalatait. Ha új a tanításban, az iskolában vagy akár a kurzusban, lehet, hogy még mindig tanulja a professzori lét különböző aspektusait, például a kurzus felépítését, a tanítási készségeket, a hallgatói interakciókat és a tanszéki elvárásokat.
- Vegye figyelembe a kurzus kontextusát és jellemzőit. A kutatások azt mutatják, hogy a hallgatók értékelései gyakran pozitívabbak azokon a kurzusokon, amelyek inkább kisebbek, mint nagyobbak, és inkább választhatóak, mint kötelezőek. Emellett az értékelések általában pozitívabbak azokon a kurzusokon, amelyeken a hallgatók általában jól teljesítenek.
A negatív hallgatói visszajelzések kezelése során:
- Tudja, hogy szinte minden oktató kap negatív visszajelzést pályafutása során valamikor, beleértve azokat is, akik vezető beosztásban vannak és nagyon sikeresek.
- Megengedje magának, hogy tudomásul vegye, hogy ez bántó érzés lehet, vagy feldühítheti, de egyben a további fejlődésének fontos területeire is utal.
Ha eldönti, hogyan fejlessze tovább magát tanárként:
- Tartsa szem előtt a hallgatói értékelések egyetemeken belüli és egyetemek közötti elemzése során leggyakrabban említett tanításfejlesztési területeket: 1) világosabb, konkrétabb órai kommunikáció; és 2) a kurzus tartalmának világosabb, egyértelműbb szervezése.
- Tervezze meg, hogy időpontot kérjen a Tanítási Központban egy konzultációra, amely segít az értékelések értelmezésében. Kutatások szerint azok a tanárok, akik konzultálnak valakivel az értékeléseikről, nagyobb valószínűséggel kapnak magasabb pontszámot a következő értékeléseken, mint azok, akik senkivel sem vitatják meg azokat. A hallgatói értékelésekkel kapcsolatos konzultációért hívja a Tanítási Központot a 322-7290-es telefonszámon.
Az értékelésekben kapott visszajelzések javítására irányuló lépések megtervezésekor vegye figyelembe a következő lehetőségeket:
- A kiválasztott órák végén használjon egyperces értékeléseket, és kérje meg a hallgatókat, hogy jegyezzék fel az adott órán tanult fő gondolatot, vagy két gondolatot egy vizsgált fő konstruktummal kapcsolatban, vagy egy tartalmi kérdést stb.
- Végezzen “félidős értékelést” a kurzusról a hivatalos egyetemi vagy az Ön által készített űrlap segítségével, hogy ellenőrizze, hogyan halad az óra, miközben az információkat felhasználhatja a változtatások elvégzéséhez.
- Beszélgessen az osztállyal az évközi visszajelzéseikről, és kifejezetten ültesse át a gyakorlatba valamelyik javaslatukat.
- A kurzus végső értékelése előtt magyarázza el az osztálynak, hogy milyen fontosnak tartja a hozzájárulásukat.
Félévközi hallgatói visszajelzések és egyéb stratégiák
A kurzusértékelésre úgy lehet és kell gondolni, mint egy nagyobb osztálytermi narratíva részére, amely a hallgatók tanulási tapasztalatainak javítására összpontosít az elejétől a végéig két, egymással összefonódó út mentén: a hallgatói visszajelzések és a tanítás javítása.
A hallgatói visszajelzések gyűjtése
A félév során számos lehetőség van a hallgatói visszajelzések bekérésére. A hallgatók által a félév végi kurzusértékelésben az Ön tanításáról adott visszajelzés a visszajelzés legjobban azonosítható formája, és értékes segítséget nyújthat Önnek a tanítás javításában és finomításában. A félévközi hallgatói visszajelzések bekérésének további előnye, hogy hallhatja a hallgatók aggályait, miközben még van idő a félévben a megfelelő változtatásokra.
A CFT egy kiscsoportos elemzésnek nevezett szolgáltatást kínál, amely egy olyan módszer, amellyel anonim visszajelzéseket lehet gyűjteni a hallgatóktól arról, hogy mi segíti őket a tanulásban, és mi nem segíti őket a kurzuson. Ez a teljesen bizalmas szolgáltatás kiváló módja annak, hogy a félév közepén felmérje a hallgatók reakcióját az Ön tanítására. Az SGA szolgáltatással kapcsolatos további információkat a CFT weboldalán talál.
Ha saját maga szeretne visszajelzést gyűjteni a hallgatóktól, kérjük, tekintse meg a “Visszajelzés gyűjtése a hallgatóktól” című oktatási útmutatót, amelyben ötleteket és eszközöket talál.
Végül, ha a félév során informális visszajelzést szeretne kérni a hallgatóktól a tanulásukról, fontolja meg néhány, az Ön osztályterméhez leginkább illeszkedő tantermi értékelési technika (CAT) adaptálását a CATs oktatási útmutatóból. A CAT egyik példája a percpapír, amelynek során a tanulók egy percet szánnak arra, hogy egy kérdésre vagy állításra adott választ írjanak. Ez különösen tanulságos lehet, ha a kérés célja, hogy visszajelzést gyűjtsön a kurzuson szerzett tanulási tapasztalataikról.
A tanítás fejlesztésének egyéb mechanizmusai
A tanítás fejlesztéséhez szükséges hallgatói visszajelzések beépítésének folyamata néha ijesztő folyamatnak tűnhet. A CFT az alábbiak révén támogató rendszerként szolgálhat az Ön számára ebben a folyamatban:
CFT egyéni konzultációk. Bármilyen tanítási kérdéssel vagy témával kapcsolatos konzultációra rendelkezésre állunk.
- Megfigyelések. A CFT tantermi megfigyeléseket kínál, mint olyan mechanizmust, amellyel az oktatók személyre szabott visszajelzést kaphatnak egy adott órára vonatkozóan.
- Tanterv-felülvizsgálat. A CFT munkatársa Önnel együtt átnézheti a tanmenetet, és megvizsgálhatja, hogy a kurzus felépítése mennyire valósítja meg a kitűzött célokat.
- Témaspecifikus konzultációk. A CFT munkatársai konzultálhatnak Önnel konkrét tanítási kérdésekről is, például a hatékony vitamódszerekről vagy az értékelési lehetőségekről.
- Pedagógia-specifikus konzultációk. Ha Ön bizonyos pedagógiai módszerek, például az esetalapú tanulás, a szolgáltatásalapú tanulás vagy a csapatalapú tanulás bevezetése iránt érdeklődik, a CFT együtt dolgozhat Önnel, hogy az adott megközelítést az osztályához igazítsa.
A CFT minden ősszel megrendezi a Nyitott tantermet, egy többnapos tanítási látogatási eseményt, amely lehetőséget nyújt a tanítási gyakorlatok megfigyelésére és megvitatására az egyetem egész területén.
A CFT különböző tanítási témájú tanulási közösségeknek is otthont ad. Ezek a közösségek lehetőséget biztosítanak a Vanderbilt oktatóinak arra, hogy egymástól és egymással tanuljanak, miközben fejlesztik tanítási készségeiket.
A CFT-n kívül a kollégák értékelése egy másik módja annak, hogy értékes visszajelzést kapjanak a kollégáktól, és hogy potenciálisan létrehozzanak egy tanárokból álló közösséget a tanszékükön. További információért tekintse meg a Tanítás szakértői értékeléséről szóló útmutatót.
Források a hallgatói értékelések értelmezéséhez
“Student Rating Forms”, egy fejezet Barbara Gross Davis Tools for Teaching című könyvéből.
Interpreting and Working with Your Course Evaluations, egy forrás a Stanford University Center for Teaching and Learning-től, amely javaslatokat tartalmaz a hallgatói értékelés egyes kérdéseire adott pontszámok javítására.
Evaluating and Improving Undergraduate Teaching in Science, Technology, Engineering, and Mathematics, a National Research Council által kiadott on-line könyv (2003).]
A következő cikkek a New Directions for Teaching and Learning című folyóirat 2001. évi 87. számának különszámában találhatók: Techniques and Strategies for Interpreting Student Evaluations . Issue Edited by Karron G. Lewis.
- Faculty Thoughts and Concerns about Student Ratings, írta John C. Ory, Office of Instructional Resources at University of Illinois at Urbana-Champaign. “Bár az oktatás hallgatói értékeléseit használják annak megállapítására, hogy valaki hatékonyan tanít-e, sokan, akik használják őket, nincsenek tisztában az őket alátámasztó kiterjedt kutatási alapokkal.”
- A hallgatók bátorítása a visszajelzésre, írta Marilla D. Svinicki, Center for Teaching Effectiveness at the University of Texas at Austin. “A visszajelzés adása megtanulható készség. Melyek azok a feltételek, amelyek elősegítik ezt a tanulást és a készség későbbi használatát az oktatóknak adott visszajelzésben?”
- Making Sense of Student Written Comments, írta Karron G. Lewis, Center for Teaching Effectiveness at the University of Texas at Austin. “A legtöbb hallgatói értékelő eszköz tartalmaz egy helyet a hallgatói megjegyzéseknek, a megjegyzéseket azonban gyakran nehéz értelmezni. Ez a cikk bemutatja ezeket a megjegyzéseket, és az információkat a tanítás és a diákok tanulásának javítására használja fel.”
- Using Midsemester Student Feedback and Responding to It, by Karron G. Lewis, Center for Teaching Effectiveness at the University of Texas at Austin. “A hallgatók félévközi visszajelzéseinek beszerzése segíthet változtatásokat eszközölni, mielőtt még túl késő lenne.”
- Interpreting the Numbers: Egy elbeszélés segítségével segíthetsz másoknak pontosan elolvasni a tanításodról szóló hallgatói értékeléseket, írta Jennifer Franklin, Center for Teaching and Learning at California State University, Dominguez Hills. “A hallgatói értékelések napjainkban az egyik legszélesebb körben használt mérőeszköz a tanításban. Minden felhasználónak meg kell értenie, mit jelentenek a számok, és hogyan kell és hogyan nem szabad használni őket.”
A következő cikkek a Center for Teaching korábbi hírleveléből származnak: Teaching Forum 6:1,2003 őszi hírlevél, “Evaluating Teaching: Student Ratings and Beyond.”
- Student Course Evaluations, írta Anupama Balasubramanian, CFT ösztöndíjas. A Center for Teaching hírlevelének ebben a cikkében a Vanderbilt kar egyik oktatója és tanársegédje beszél a hallgatói kurzusértékelésekkel kapcsolatos meglátásaikról, és arról, hogyan lehet azokat hatékonyan használni.
- From the Student’s View, írta Anupama Balasubramanian, CFT ösztöndíjas. A Center for Teaching hírlevelének ebben a cikkében nyolc Vanderbilt-alapszakos hallgató osztja meg a hallgatói értékelőlapokkal kapcsolatos tapasztalatait.
- Interjú a CFT hallgatói értékelésekkel kapcsolatos konzultációjáról, írta Anupama Balasubramanian, CFT-ösztöndíjas. A Center for Teaching hírlevélben megjelent cikkben Peter Felten, a CFT korábbi társigazgatója a hallgatói értékelési konzultációkkal kapcsolatos munkájáról számol be.
Summaries of Research on Student Evaluations
Student Ratings of Teaching: A Summary of Research and Literature (IDEA Paper 50), írta Stephen L. Benton és William E. Cashin, IDEA Center. Ez a fehér könyv “összefoglalja az 1970-es évektől 2010-ig a hallgatói értékelésekkel kapcsolatos kutatások és szakirodalom főbb áttekintéseinek következtetéseit. Ez a szakirodalom kiterjedt és összetett; egy ilyen rövid dokumentum csak átfogó, általános összefoglalókat és korlátozott idézeteket tud nyújtani.”
Student Ratings: Mítoszok vs. kutatási bizonyítékok, írta Michael Theall, Center for Teaching and Learning at the University of Illinois at Springfield. Theall, az oktatás tervezésének, fejlesztésének és értékelésének kutatási szakértője, a Student Ratings mögött álló mítoszokat és igazságokat vizsgálja (újranyomtatva a Brigham Young University Faculty Center engedélyével).
How To Evaluate Teaching, by Richard Felder, from Chemical Engineering Education, 38(3), 200-202 (2004). “A hatékony tanításértékelés kulcsa az, hogy több forrásból gyűjtsünk adatokat …biztosítva, hogy minden oktatással kapcsolatos tevékenységet azok az emberek értékeljenek, akik a legalkalmasabbak az értékelésre.”
Looking for Bias in All the Wrong Places: Michael Theall, az Illinois-i Egyetem Springfieldi Tanítási és Tanulási Központjának munkatársa, és Jennifer Franklin, a Kaliforniai Állami Egyetem Dominguez Hills-i Tanítási és Tanulási Központjának munkatársa. “A tanulói értékelésekkel kapcsolatos fél évszázados kutatás során az állandó törekvés az volt, hogy bizonyítsák vagy cáfolják a torzító tényezők létezését. Mit tudtunk meg, és mi történt ennek eredményeként?”
Kérdések a tanulói értékelőlapokkal kapcsolatban gyakran feltett kérdések: Summary of Research Findings,” Matthew Kaplan, Lisa A. Mets és Constance E. Cook, University of Michigan Center for Research on Learning and Teaching. Ez a cikk olyan kérdésekre ad választ, mint például: “Mit tudunk az osztályzatok és a tanulói értékelések közötti kapcsolatról? Mit árulnak el a tanulói értékelések a tanítás hatékonyságáról?”
Flunking the Test: The Dismal Record of Student Evaluations, írta Paul Trout, Montana State University. “Bár a legtöbb iskola használja őket, a tanári kar tagjainak számszerű értékelései rossz jegyeket kapnak. Nem pontosak, és butítják az egyetemi oktatást.”
Student Ratings of Professors are not Gender Blind, írta Susan Basow, Lafayette College. Ez a cikk eredetileg az Association for Women in Mathematics Newsletterben jelent meg. “A férfi professzorok értékelését nem befolyásolja a hallgatók neme, de a női professzorok gyakran alacsonyabb értékelést kapnak férfi hallgatóiktól és magasabbat női hallgatóiktól. Úgy tűnik, hogy a női professzorokat súlyosabb elvárások szerint értékelik, mint a férfi professzorokat, és ezek az elvárások befolyásolják a hallgatók értékelését.”
Student Ratings of Women Faculty, írta Michael Theall, Center for Teaching and Learning at the University of Illinois at Springfield, és Jennifer Franklin, Center for Teaching and Learning at California State University, Dominguez Hills. Ez a cikk kutatási eredményeket közöl az oktató neme és a tanítás hallgatói értékelései közötti kölcsönhatásokról.
Student Evaluations and Gendered Expectations: What We Can’t Count Can Hurt Us, írta Kelley Massoni, University of Kansas, és terjesztette a Sociologists for Women in Society. “Hogyan játszik szerepet a nemi hovatartozás a diákok tanáraikról alkotott értékeléseiben. Az erre a kérdésre választ kereső tudósok eredményei megoszlanak. …Ez az adatlap a nemek és a tanári értékelésekkel kapcsolatos kutatások értelmezését szolgálja.”
Are Student Ratings Unfair to Women? by Neal Koblitz, University of Washington, reprinted from the Association for Women in Mathematics Newsletter, Vol. 20, No. 5, September-October, 1990. “Ha egy oktató úgy érzi, hogy kénytelen nyomás alá helyezni a hallgatókat (sok házi feladatot ad, kihívást jelentő vizsgákat tesz), akkor egyáltalán csak a legkomolyabb és legérettebb hallgatók fognak magas értékeléssel válaszolni a kurzus végén. A legtöbb diák hajlamos arra, hogy “megbüntesse” az oktatót. Jelentős bizonyíték van arra, hogy a “büntetés” súlyosabb, ha az oktató nő.”
Gender and Student Evaluations: An Annotated Bibliography, at the Center for Research on Learning and Teaching at the University of Michigan.
Student Evaluations: Lynn H. Collings, Joan C. Chrisler, and Kathryn Quina, excerpted from Career Strategies for Women in Academe: Arming Athena (Sage Publications, 1998). “A szerzők tárgyalják a kari teljesítmény hallgatói értékelését befolyásoló tényezőket, és azokat a lépéseket, amelyeket különösen a női oktatók tehetnek a negatív előítéletek enyhítésére.”
Ez a tanítási útmutató a Creative Commons Attribution-NonCommercial 4.0 Nemzetközi licenc alatt áll.