Nauwkeurigheid van beoordelingen van leerprestaties: algemeen of domein-specifiek?

In een studie die onlangs is geaccepteerd in Contemporary Educational Psychology is onderzocht of de diagnosevaardigheden van basisschoolleraren specifiek zijn voor bepaalde schoolvakken of domeinen. Hiervoor is de zogenaamde "teacher judgment accuracy" (TJA) onderzocht. Teacher judgment accuracy is de kwaliteit of accuraatheid van de beoordelingen die leraren maken van de prestaties van hun leerlingen. Volgens de auteurs, Elena Mack, Jessica Gnas, MiriamVock en Franzis Preckel  is belangrijk om te onderzoeken of leraren specifieke vaardigheden moeten ontwikkelen voor het beoordelen van prestaties in verschillende vakken, omdat onjuiste beoordelingen vergaande gevolgen kunnen hebben voor leerlingen. 

Om TJA te meten, is gebruik gemaakt van een vragenlijst waarbij leraren hun beoordelingen van de prestaties van leerlingen in verschillende vakken moesten geven. De resultaten van dit onderzoek laten zien dat basisschoolleraren behoorlijk goed zijn in het inschatten van de prestaties van hun leerlingen. Toch bleken de beoordelingen van leraren in bepaalde domeinen nauwkeuriger te zijn dan in andere (lezen versus meetkunde). De auteurs suggereren dat het belangrijk is dat leraren vaardigheid ontwikkelen in het beoordelen van de prestaties van hun leerlingen in verschillende domeinen en voor verschillende vakken.

Het abstract

Teachers’ diagnostic competence for accurately judging students’ achievement is essential for instructional practice and professional decisions. To promote their judgment accuracy, it is important to know if this is a general or domain-specific skill. We investigated teachers’ judgment accuracy in German language (one subdomain: reading) and mathematics (two subdomains: geometry; stochastics) and examined differences across domains (i.e., German and mathematics) and across subdomains (reading; geometry; stochastics). We examined the judgment accuracy of 59 German elementary school teachers who teach both German and Mathematics, judging the achievement of 1227 students in the three subdomains. We conducted multilevel analyses with a subsample of 39 teachers and 787 students and calculated different accuracy components (i.e., rank, level, and differentiation) to examine the comparability of our results. In line with prior research, findings revealed that teachers’ judgments were fairly accurate. However, there were significant differences between teachers’ average judgment accuracy in different subdomains (between-person comparisons) and no or only a weak relation between individual teachers’ judgment accuracy in different subdomains (within-person comparisons). Findings support the notion that teachers’ judgment accuracy of student achievement is domain-specific with respect to the investigated subdomains. Practical implications for the promotion of teacher judgment accuracy are discussed.